De excelente a bueno: el valor diluido de los puntajes altos en las pruebas

Cuando llegaron las cartas de admisión la primavera pasada, los consejeros y las familias se rascaron la cabeza más de lo habitual. Gran parte de la discusión giró en torno a cuán impredecibles parecían las cosas, especialmente en lo que respecta a los puntajes de las pruebas.

Con el lanzamiento de los resultados de la clase de 2018 de ACT y College Board, ahora podemos decir definitivamente que los estudiantes obtuvieron los puntajes más competitivos de la historia. En los últimos 10 años, se duplicó el número de estudiantes con una puntuación de 1400 a 1600 en el SAT o de 31 a 36 en el ACT.

Tan solo en los últimos 5 años, la cantidad de estudiantes con puntajes de 1500 a 1600 o de 34 a 36 se ha duplicado. Soy Sat ha examinado en profundidad cómo se ha formado esta tendencia, por qué se aceleró en 2018 y qué impacto tiene en las admisiones.

Un gran cambio en el SAT

El SAT recuperó impulso el año pasado y una vez más se convirtió en la prueba de admisión más popular, si esa es la palabra correcta. La historia que se ha pasado por alto es el aumento de las puntuaciones máximas. En la clase de 2017, College Board informó que 85 000 estudiantes obtuvieron calificaciones entre 1400 y 1600. Para la clase de 2018, 145 000 cayeron en este rango, ¡un salto del 71 % en un solo año!

Si bien el tamaño del cambio del año pasado fue inusual, su dirección no lo fue. El aumento se ajusta a una tendencia histórica tanto para el SAT como para el ACT que no muestra signos de disminuir. Es posible que los estudiantes, los padres, los consejeros e incluso las oficinas de admisión deban reconsiderar su confianza en lo que es un puntaje “excelente”. Un puntaje alto no es menos un logro desde un punto de vista académico, pero es un logro compartido por un conjunto más amplio de estudiantes. Se ha vuelto más difícil distinguirse con puntajes altos.

Un ejemplo del mundo real

UC Berkeley es una de las escuelas más competitivas del país y brinda contexto porque, junto con los otros campus de la Universidad de California, publica datos de postulantes y admisión por rango de puntaje. Las tendencias estatales y nacionales que estamos viendo se reflejan en las estadísticas de Berkeley. El número de solicitantes con puntajes de SAT ERW y SAT Math de 700–800 se duplicó aproximadamente el año pasado. Si bien es cierto que parte de ese cambio es un reflejo del SAT general y del crecimiento de los solicitantes, el porcentaje de solicitantes en el rango de puntaje más alto también aumentó. Como se muestra a continuación, el porcentaje de estudiantes con puntajes de Matemáticas de 700 o más pasó del 41 % de los solicitantes en 2017 al 56 % de los solicitantes en 2018. El cambio tampoco se limitó a los solicitantes. Los estudiantes admitidos cayeron en el rango superior el 54 % del tiempo en el ciclo de otoño de 2017, pero el 70 % del tiempo en el ciclo de 2018.

Los puntajes de ACT en Berkeley también han experimentado un aumento constante. A continuación se muestra un gráfico de los últimos cinco años del porcentaje de solicitantes de ACT que tienen puntajes en la banda más alta de puntajes compuestos, 31–36.

El todo esconde las partes.

Las noticias sobre los datos de SAT y ACT tienden a centrarse en las cifras generales: total de examinados o puntajes promedio. Este enfoque enmascara los cambios en los resultados de las pruebas y el comportamiento de los examinados, particularmente en las “colas” de las distribuciones de puntajes. Por ejemplo, si el número de estudiantes con puntajes bajos y altos aumenta en números iguales, es posible que el puntaje promedio no se mueva en absoluto. Entre 2008 y 2018, el puntaje compuesto promedio de ACT pasó de 21.1 a 20.8, un cambio insignificante. Sin embargo, nueve veces más estudiantes lograron un 36 en 2018.

Dos tendencias muy diferentes ayudan a explicar esta divergencia. En los últimos años, College Board y ACT se han centrado en vender pruebas en todo el estado. Al hacer que todos los estudiantes participen, los estados han llevado la conciencia y la preparación universitaria a una amplia franja de estudiantes. Como grupo, los estudiantes que evalúan solo porque deben hacerlo obtienen una puntuación más baja que los estudiantes que optan por participar.

Es más probable que los examinados con puntajes altos sean agentes libres y decidan cuál es la mejor prueba en función de las preferencias individuales. Estos estudiantes se han convertido en consumidores inteligentes y no sienten la necesidad de seguir etiquetas como “estado ACT” versus “estado SAT”. Es cada vez más probable que consideren ambas pruebas y, en muchos casos, tomen ambas pruebas. La elección informada de la prueba a menudo les permite comenzar en un punto más alto en comparación con una decisión de lanzar una moneda y puede permitirles progresar más rápidamente.

¿Dónde estaban los máximos goleadores?

Las pruebas exigidas por el estado explican por qué Illinois y Colorado ocupan los primeros lugares en el crecimiento de las personas que toman el SAT. Otros 186000 estudiantes tomaron el SAT en esos estados en la clase de 2018, porque ambos estados pasaron de financiar el ACT para todos los estudiantes a financiar el SAT para todos los estudiantes. Los dos estados tuvieron un impacto más moderado en los puntajes altos, representando solo una décima parte del aumento en los puntajes más altos. Los estados de agentes libres como California, Nueva York, Nueva Jersey y Massachusetts formaron gran parte del resto. Los estudiantes internacionales también desempeñaron un papel importante en la reorganización de los puntajes en el extremo superior. Otros 9,077 estudiantes internacionales obtuvieron puntajes en el rango de 1400–1600 en la clase de 2018, a pesar de que solo hubo 28,568 estudiantes adicionales que tomaron el examen SAT. Los estudiantes que eligieron tomar el SAT esperaban que les fuera bien, y lo hicieron. A continuación se muestran los datos de los 50 estados, el Distrito de Columbia, Puerto Rico, las Islas Vírgenes de EE. UU. e internacionales.

El curioso caso de California

El año pasado, California se convirtió, por primera vez, en el mercado más grande tanto para el SAT como para el ACT. El gran tamaño del estado no es la única razón por la que proporciona un estudio de caso útil. California nunca ha tenido exámenes de admisión universitarios obligatorios o financiados por el estado, y su población de examinados es muy diversa. El caso de California muestra cómo el comportamiento de los examinados desempeñó un papel en el aumento de las puntuaciones altas.

En la clase de California de 2017, en realidad hubo una disminución en la cantidad de estudiantes en el nivel más alto de puntajes. Estos estudiantes desertaron al ACT. Con la clase de 2018, esos estudiantes regresaron. ¡Y trajeron a sus amigos! El número de estudiantes con una puntuación superior a 1400 en el SAT se duplicó con creces en un solo año.

Este flujo de ida y vuelta es la razón por la que Soy Sat no cree que el aumento en las puntuaciones máximas se pueda atribuir únicamente a la inflación de las puntuaciones, una prueba “más fácil” o una preparación más eficaz.

Muchos de los mejores puntajes de la clase de 2017 optaron por evitar la incertidumbre del nuevo SAT cuando elaboraron sus planes de prueba. Para algunos, esto significó exprimir un viejo SAT antes de que desapareciera. Para otros, significó cambiar a un bien conocido, el ACT. Y para otros, significó probar múltiples tipos de pruebas.

¿Los percentiles no dan una contabilidad precisa?

Los percentiles pueden ser una forma útil de describir la distribución de puntajes de las pruebas. Sin embargo, son un indicador rezagado. Las cifras que se muestran en los informes de puntajes del SAT de la clase de 2018 se basaron en el desempeño de los estudiantes de la clase de 2017. Los percentiles fueron engañosamente optimistas: el rango real de un estudiante con puntaje alto dentro de la clase de 2018 habría sido más bajo que el proyectado. Incluso los próximos informes SAT mostrarán percentiles que subestiman la cantidad de puntajes altos. College Board informará percentiles basados ​​en las clases de 2017 y 2018 (está incorporando gradualmente el uso de un promedio móvil de 3 años). Si bien basar los percentiles en dos o tres años de clase puede suavizar los altibajos menores, la política tiene menos sentido cuando la trayectoria es siempre en una dirección. No tendremos datos completos sobre el rendimiento de la clase de 2019 durante otros 11 meses, pero sin duda será más alto de lo que indican los percentiles. Los percentiles tampoco reflejan el impacto de las políticas de puntuación más alta o superpuntuación.

Soy Sat se encuentra con frecuencia con la percepción errónea de que las puntuaciones estandarizadas siempre se distribuyen normalmente en torno a una media. De hecho, la escala solo pretende garantizar que un 700 o un 33 signifique lo mismo en un año que en el siguiente. La distribución cambia cada año. No está diseñado para que el mismo número de estudiantes obtenga una determinada puntuación cada año. Es por eso que cualquier regla empírica sobre una puntuación buena o excelente puede quedar obsoleta tan pronto como se da. Si las puntuaciones se agrupan demasiado en el extremo superior, existe la preocupación de que serán menos útiles para distinguir a los estudiantes o para predecir el rendimiento en la universidad.

Desde el punto de vista de un estudiante, cualquier error se vuelve más costoso a medida que los grupos de puntuación se vuelven más poblados. [For optimistic students, any gain becomes more valuable!] Imagine un estudiante en la clase de 2017 que esperaba obtener un puntaje de 750 en Matemáticas, pero en cambio obtuvo un puntaje de 700. El déficit habría puesto a 70,000 estudiantes adicionales por delante de ella. Transplante a ese estudiante a la clase de 2018 y habría visto pasar a más de 120 000 estudiantes, incluso antes de considerar las políticas de puntuación más alta o superpuntuación. Como demostró la controversia sobre el SAT de junio, incluso 2 o 3 problemas perdidos pueden hacer que un estudiante pierda 50 puntos fácilmente. Es comprensible por qué los estudiantes a veces sienten que están en el filo de la navaja.

Una experiencia más fácil

Soy Sat no cree que la teoría de la deserción/re-adopción explique la totalidad del cambio en los puntajes altos del SAT. La clase de 2018 enfrentó menos obstáculos que la clase de 2017. El nuevo SAT es, en términos generales, el único SAT que la clase de 2018 conoció. Tomaron el nuevo PSAT en el segundo año, lo repitieron en el tercer año y todos sus puntajes del SAT están en el nuevo examen. Hubo menos ruido alrededor de SAT versus ACT y más señal. Los estudiantes podrían tomar decisiones óptimas sin sentirse como conejillos de indias en un experimento de College Board. Podrían tomar la prueba antes o después sin preocuparse por el cambio del SAT antiguo al nuevo. A medida que hubo más información disponible para el SAT, estaban mejor preparados que la clase de 2017. En resumen, la clase de 2018 no necesariamente enfrentó una prueba más fácil; enfrentaron una experiencia más fácil.

Un cambio contable

El antiguo SAT introdujo un extraño problema de contabilidad para College Board. Su informe de 2017 incluyó solo a los estudiantes que tomaron el nuevo SAT. Esto excluyó a los estudiantes que terminaron sus pruebas con el antiguo SAT. Debido a que ese grupo se inclina hacia los estudiantes de alto rendimiento, el total de 1400–1600 de 85 000 estudiantes probablemente subestimó las puntuaciones máximas en la clase de 2017 por 5000–10 000. Esto ayuda a explicar por qué la cifra de 2017 fue tan baja.

La fuente del aumento de puntaje alto no es del todo académica. La concordancia de los puntajes de SAT y ACT se basó en el desempeño de los estudiantes de la clase de 2017 que tomaron ambos exámenes. Si la clase de 2018 difirió significativamente de la clase de 2017, entonces la concordancia es menos precisa, al menos en el extremo superior de la escala.

¿No se compensaría un aumento en los números de SAT con una disminución en los números de ACT?

Un comprador adicional de una camioneta Ford significa un comprador menos de una Chevy o Ram. No se puede decir lo mismo del SAT. Muchos estudiantes con puntajes altos han “descubierto” el ACT y lo agregaron a sus carpetas en lugar de cambiarse a él exclusivamente. El aumento de las puntuaciones máximas en el ACT se desaceleró con la clase de 2018, pero no se revirtió, a pesar de una caída general de 176000 examinados.

El papel de las pruebas duales

Tomar tanto el SAT como el ACT ha jugado un papel en el crecimiento de las puntuaciones altas. Se ha sumado al número total de pruebas tomadas por los que obtienen puntajes altos y les ha permitido acumular más puntajes máximos. Sin embargo, un estudiante tiene solo una mejor puntuación (incluso un empate concordante significa que una sola puntuación puede resumir las cosas). Esto lleva a un doble conteo de puntajes altos, algo que no es exclusivo de la clase de 2018. Por ejemplo, un estudiante con un ACT de 33 no recibe ningún beneficio por haber obtenido un puntaje de 1420 en el SAT, aunque el último puntaje contaría en la universidad. Cifras de la Junta.

Ni College Board ni ACT informan sobre pruebas cruzadas. De hecho, ni siquiera tienen acceso directo a estos datos, ya que ambos deben cumplir con las restricciones de privacidad. Con base en datos de universidades competitivas, estimamos que aproximadamente un tercio de los estudiantes con puntajes altos toman ambos exámenes al menos una vez.

Esta tendencia no significa que los estudiantes estén en desventaja si solo se enfocan en una prueba. Es difícil estar completa e igualmente preparado para dos pruebas de admisión. Lo importante es que los estudiantes consideren cada vez más ambas pruebas y traten de encontrar el camino óptimo.

¿Qué pasa con las puntuaciones más excepcionales?

La mayor parte de la discusión anterior ha sido sobre estudiantes en el rango de 1400–1600 porque College Board ha dejado de informar la cantidad de estudiantes en cada punto de calificación. Las tendencias históricas de SAT y las tendencias actuales de ACT indican que el cambio en las puntuaciones más altas es aún más extremo. Si bien la cantidad de anotadores de ACT de 31 años o más solo aumentó ligeramente en la clase de 2018, por ejemplo, la cantidad de anotadores perfectos aumentó en un 36 %. El percentil superior de las puntuaciones de ACT ha subido un punto completo en los últimos 5 años. Durante cada uno de los últimos 15 años, el crecimiento de las puntuaciones más elitistas ha superado el ya significativo crecimiento de las puntuaciones excelentes.

Partituras de gran tamaño

A pesar de los llamativos números de crecimiento de este año, los datos en realidad subestiman el número de máximos anotadores de una manera. En sus cifras informadas, College Board y ACT utilizan el rendimiento de prueba más reciente de un estudiante. Un estudiante con una puntuación de 1450 en junio y luego de 1420 en octubre se habría contado como 1420. Dado que la mayoría de las universidades consideran el mejor rendimiento o participan en Score Choice, este estudiante habría obtenido (al menos) una puntuación de 1450 en la admisión oficinas Una gran cantidad de universidades competitivas superan ahora los resultados del SAT. Una superpuntuación combina el mejor desempeño en lectura basada en evidencia de un estudiante con su mejor desempeño en matemáticas, incluso si los puntajes provienen de sesiones separadas.La investigación de College Board indica que la contabilidad “más reciente” es, para los estudiantes que toman el SAT más de una vez, aproximadamente 20 puntos más bajos que el puntaje de “administración única más alta” y 30 puntos más bajos que el puntaje superior. Cuantos más estudiantes repiten los exámenes, más crece esta cifra. Los estudiantes con puntajes altos tienden a repetir el SAT y el ACT más que los estudiantes con puntajes bajos, por lo que el impacto de repetir las pruebas se magnifica en los niveles superiores. Alrededor de dos tercios de los que volvieron a realizar la prueba tienen superpuntajes que son más altos que sus mejores puntajes de una sola administración.

Soy Sat estima que las políticas combinadas y de superpuntuación más altas aumentan la cantidad de estudiantes en los rangos de puntuación más altos en un 15-20%. Si bien College Board puede informar que 145 000 estudiantes obtuvieron una puntuación de 1400 a 1600 en la clase de 2018, las solicitudes universitarias probablemente reflejaron al menos 170 000 estudiantes en ese rango. ACT informa 135,000 estudiantes en el rango 31-36. Una estimación del mundo real estaría más cerca de 160.000.

¿No es todo esto solo inflación de puntaje relacionada con el nuevo SAT?

College Board revisó por completo el SAT en marzo de 2016. Al comparar el desempeño de un grupo piloto de estudiantes al tomar el SAT antiguo y el nuevo, se desarrolló una concordancia entre los dos exámenes. En general, la concordancia mostró, y estudios posteriores confirmaron, que las puntuaciones eran más altas en el nuevo SAT. Sin embargo, los cambios vistos en 2018 son independientes de esa reestructuración de puntaje. Usar la estructura y puntuación del nuevo SAT para explicar los desarrollos de este año tiene varias fallas:

• El informe de la clase de 2017 se basa en nuevos datos del SAT. La inflación de puntaje ya debería haberse tenido en cuenta.
• La inflación de la puntuación disminuye en el extremo superior del rango. Si bien es probable que un estudiante con una puntuación de 900 a 1100 en el examen anterior obtenga entre 80 y 100 puntos más en el nuevo examen, no se puede decir lo mismo de los estudiantes con 1400 a 1600. De hecho, hay poca diferencia por encima de 1450.
• El antiguo SAT y el ACT han tenido un número creciente de estudiantes con altas calificaciones durante muchos años. La tendencia es real; 2018 es un caso atípico debido a la escala del cambio, pero encaja bien con el pasado. patrón de carreras.

¿Qué pasará con la clase de 2019?

Es poco probable que se revierta la tendencia de que más estudiantes lleguen a los niveles superiores. Sin embargo, los primeros indicios son que los saltos gigantes que se vieron el año pasado no se repetirán. Los puntajes de PSAT pueden servir como un indicador principal de los cambios de puntaje. Si bien la clase de 2018 vio grandes cambios en el extremo superior de los puntajes del PSAT, los resultados del PSAT de la clase de 2019 mostraron aumentos modestos. Las primeras fechas de SAT reflejan pequeñas mejoras promedio para la clase de este año. Sin embargo, como se señaló anteriormente, las puntuaciones promedio pueden enmascarar los cambios en las puntuaciones altas y bajas. Ninguna de las cifras disponibles indica que el número de puntajes máximos disminuirá.

También continúa el crecimiento de la puntuación alta en el ACT. Si bien disminuyó este año, eso fue en parte el resultado de una disminución general debido a la pérdida de contratos estatales. Esperamos que la clase de 2019 muestre aumentos, particularmente para puntajes de élite.

En las universidades más competitivas, los puntajes altos en las pruebas pueden verse como “necesarios pero no suficientes”. Es extremadamente difícil obtener la admisión a Stanford con un puntaje SAT bajo, pero obtener un puntaje alto está lejos de ser una garantía de admisión. El efecto neto del crecimiento en los rangos superiores es hacer que una puntuación alta sea más esencial pero menos suficiente.

Después de que el polvo se asiente cada mes de abril, a menudo escuchamos que “este fue el peor año de todos”. Para 2018, esa evaluación se siente justa. Los puntajes de ACT y SAT en las universidades han tenido una tendencia al alza con el tiempo, pero no son solo los puntajes más altos los que crean ansiedad, sino también la imprevisibilidad adicional. La combinación de un mayor número de solicitantes en universidades competitivas y un mayor porcentaje de puntajes altos magnifica la incertidumbre que experimentan los estudiantes. Afortunadamente, cientos de miles de estudiantes que experimentaron esta ansiedad en abril pasado están prosperando en la universidad y esperan ansiosos el regreso a casa. Y 2019 será el peor año de la historia, hasta que deje de serlo.