Metodología del College Success Award

El College Success Award (Premio al Éxito Universitario) reconoce y celebra a las escuelas secundarias públicas que se destacan al preparar a sus estudiantes para el éxito postsecundario. A lo largo de los años, hemos reconocido a:

2018: 814 escuelas en 9 estados y publicado un informe de nuestros descubrimientos.
2019: 1.722 escuelas en 25 estados.
2020: 2.158 escuelas en 29 estados y publicado tres informes compartiendo nuestros conocimientos sobre el éxito universitario.
2021: 1.838 escuelas en 25 estados y otorgado la distinción College Success Award – Gold (Premio al Éxito Universitario – Oro) a 1.770 escuelas en 26 estados.
2022: 1.742 escuelas en 25 estados.

Esta es la metodología que utilizamos para determinar las escuelas galardonadas.

Contexto

El objetivo del College Success Award es reconocer y celebrar a las escuelas secundarias públicas que están preparando con éxito a los estudiantes para inscribirse y tener éxito en la universidad. Los ganadores del premio se determinan mediante una metodología que evalúa los datos a nivel escolar sobre la preparación universitaria, la inscripción y el rendimiento universitarios.

En 2021, GreatSchools incorporó el College Success Award – Gold (Premio al Éxito Universitario – Oro) como un nivel de distinción más alto del College Success Award (Premio al Éxito Universitario) como una forma de reconocer a las escuelas que han mantenido un historial destacado de éxito postsecundario incluso en medio de la pandemia. GreatSchools no otorga esta distinción especial todos los años.

Estados incluidos

En 2022, GreatSchools recopiló suficiente información para determinar el College Success Award (Premio al Éxito Universitario) en 25 estados: Alabama, Arkansas, Colorado, Connecticut, Georgia, Hawái, Idaho, Indiana, Kentucky, Luisiana, Maine, Massachusetts, Michigan, Minnesota, Mississippi, Missouri, Nebraska, Nueva Jersey, Nevada, Dakota del Norte, Ohio, Oklahoma, Texas, Vermont y Washington.

Once de los estados con escuelas aptas para recibir el College Success Award 2022 (Premio al Éxito Universitario) brindaron información adicional sobre el nivel de éxito universitario en los estudiantes de familias de bajos recursos, lo que le permitió a GreatSchools analizar el éxito universitario de la escuela poniendo un mayor énfasis en la igualdad. Los estados que proporcionan información adicional sobre los estudiantes con derecho a exoneraciones o descuentos en el pago de almuerzos son Connecticut, Georgia, Indiana, Kentucky, Luisiana, Michigan, Mississippi, Nebraska, Nueva Jersey, Texas y Washington.

Datos incluidos

Los ganadores del premio se determinan calculando un puntaje a nivel escolar y aplicando un enfoque para determinar cuáles escuelas reciben un premio y cuáles no. Este puntaje a nivel escolar abarca tres componentes:

Preparación universitaria, que incluye el porcentaje de estudiantes que estudian los 4 años y se gradúan de la escuela secundaria, así como las medidas de desempeño en el examen de ingreso a la universidad (ACT o SAT).
Inscripción universitaria, que incluye métricas a nivel escolar que varían según el estado. Algunos estados informan estos datos como “porcentaje de inscritos en cualquier institución postsecundaria dentro de los 12 meses posteriores a la graduación”, otros como “porcentaje de inscritos en cualquier institución de educación superior entre los últimos 0 a 16 meses”.
Rendimiento universitario, que incluye métricas de remediación y persistencia, que también varían en disponibilidad según el estado. Las métricas de remediación capturan el porcentaje de estudiantes que necesitan cursos remediales en la universidad, ya sea para instituciones de 2 o 4 años. Las medidas de persistencia universitaria son para el porcentaje de estudiantes que regresan por segundo año a instituciones de 2 y 4 años.

Limitaciones de los datos

Hay tres limitaciones principales en los datos:

Los datos de inscripción universitaria y de persistencia no tienen en cuenta la calidad de la institución, por lo que los datos de preparación universitaria se incluyen como un indicador de calidad.
En algunos estados, los datos no están desglosados por grupos de estudiantes, por lo que es posible que los resultados no se distribuyan por igual entre los grupos. Cuando los estados proporcionan datos desglosados de grupos de estudiantes, calculamos las métricas de éxito universitario para los estudiantes elegibles para almuerzos gratuitos o de precio reducido (FRL, por sus siglas en inglés) e incorporamos estos datos para estudiantes de familias de bajos recursos en la metodología.
Los datos de entrada del análisis son datos de “punto en el tiempo”, no datos longitudinales, por lo que los resultados no necesariamente aislarán el valor agregado por la escuela de cualquier factor extraescolar que pueda estar influyendo en el desempeño.

Metodología de cálculo del premio

Puntaje inicial

Primero, normalizamos cada uno de los aportes disponibles para una escuela en particular. Para hacer esto, calculamos la posición de la escuela en la distribución estatal como un percentil para cada métrica.

Algunos estados exigen que todos los graduados de la escuela secundaria tomen un examen específico de ingreso a la universidad. En estos estados, si se obtienen datos de varios exámenes de ingreso a la universidad, solo se utilizan los datos del examen obligatorio. En los estados que no requieren que se realice un examen específico y donde hay datos disponibles para más de un examen de ingreso a la universidad, se utilizan los datos del examen con la tasa de participación más alta en todo el estado. Si las tasas de participación no están disponibles para ninguna de las pruebas, incluimos los datos de ambas en el análisis.

Dentro de cada componente, calculamos un promedio de los percentiles de las métricas disponibles, lo que da como resultado un puntaje para cada una de las tres categorías (preparación universitaria, inscripción universitaria, rendimiento universitario) para cada escuela. Este enfoque asegura que le damos la misma importancia a los tres tipos de métricas de éxito universitario en el puntaje final a nivel escolar. La elegibilidad para el premio se basa en que las escuelas tengan datos recientes en cada uno de los componentes.

Si a una escuela le faltan métricas en una categoría, entonces esa escuela no se incluye en el análisis y no es elegible para un premio ese año.

Calculamos un único puntaje a nivel escolar promediando los puntajes de los tres componentes y luego identificamos el 30 por ciento de las escuelas con el puntaje más alto en cada estado. Nuestra metodología del College Success Award 2022 incorpora el mismo enfoque centrado en la equidad que introdujimos en 2019. Para garantizar que el College Success Award de GreatSchools reconozca el éxito a través de diferentes lentes, incluyendo la equidad, identificamos las escuelas que están “superando las probabilidades” al brindar un mejor servicio a estudiantes de bajos recursos que de otra manera no estarían preparados o no asistirían a la universidad. Estimamos qué tan bien le iría a una escuela al explorar la correlación entre los puntajes promedio a nivel escolar y los niveles de ingresos de los estudiantes y otorgamos créditos a las escuelas por tener un mejor desempeño del previsto. Para las escuelas que superaron las expectativas, agregamos sus residuos a su puntaje inicial a nivel escolar para generar un puntaje ajustado a nivel escolar.

Ajuste de calificaciones

Después de calcular los puntajes a nivel escolar, aplicamos varias reglas para asegurarnos de que solo las escuelas que tienen un buen desempeño para todos los estudiantes avancen en el proceso de obtener el premio. Primero, las escuelas que se desempeñen por debajo del promedio ponderado en una métrica en su estado no recibirán el premio. En segundo lugar, las escuelas que se desempeñan en o por debajo del percentil 50 en una métrica en su estado también están descalificadas. En tercer lugar, en los 11 estados donde se encuentran disponibles los datos de estudiantes de bajos recursos, las escuelas en el 25 por ciento superior para estudiantes de bajos recursos en todo el estado (ya sea que las escuelas calificaran previamente o no) son automáticamente calificadas; las escuelas en el 50 por ciento inferior para estudiantes de bajos recursos en todo el estado quedan descalificadas. Este paso no se aplica a las escuelas en los estados donde no se dispone de datos sobre el rendimiento de los estudiantes de bajos recursos. Finalmente, las escuelas que se están desempeñando por debajo de los niveles esperados (es decir, aquellas con residuos negativos basados en la correlación entre los puntajes promedio y la inscripción de estudiantes de bajos ingresos) son descalificadas independientemente de sus puntajes o calificación previa.

Premios finales

Las escuelas con puntajes ajustados en el 30 por ciento superior para su estado que también cumplen con los otros criterios mencionados anteriormente, y las escuelas en las que los estudiantes de bajos recursos se desempeñan mejor que el 75 por ciento de los estudiantes de bajos recursos en otras escuelas del estado (donde los datos de estudiantes de bajos ingresos están disponibles) ¡son las ganadoras finales del College Success Award para 2021!

Una imagen de la metodología del College Success Award:

A visual of the College Success Award methodology

Descubre cómo determinábamos a los ganadores del College Success Award antes del 2020.