¿De qué manera son defectuosas las clasificaciones de US News & World Report para las universidades?

El presidente de la Universidad de Stanford, Gerhard Casper, escribió una carta mordaz al presidente de US News and World Report en 1996, describiendo sus principales objeciones a su clasificación:

Consistencia de las clasificaciones: “¿Podría Johns Hopkins ser la 22ª mejor universidad nacional hace dos años, la 10ª mejor el año pasado y la 15ª mejor este año? … Sabiendo que las universidades, y, en la mayoría de los casos, las estadísticas que presentan, cambian poco de un año para el siguiente, solo puedo concluir que lo que está cambiando son las fórmulas que emplean los masajeadores de números de la revista ”

Métricas falsas : “Permítanme examinar un ejemplo en” Valor agregado “: el Instituto de Tecnología de California ofrece un plan de estudios riguroso y exigente que sin duda agrega un gran valor a sus estudiantes. Sin embargo, Caltech es crucificado por tener una tasa de graduación” prevista “de 99 % y una tasa de graduación real del 85%. ¿Alguna vez se les ocurrió a las personas que crearon esta “medida” que muchos estudiantes no se gradúan de Caltech precisamente porque consideran que Caltech es demasiado riguroso y exigente, es decir, que agrega demasiado valor para ¿Caltech podría alcanzar fácilmente la tasa de graduación “pronosticada” del 99% al ofrecer un plan de estudios cremoso y una calificación automática de A. ¿Sería eso un valor agregado? ”

Falsa objetividad estadística: “Sin embargo, ¿no podría haber al menos un movimiento hacia una mayor honestidad y servicio a sus lectores alejándose de la falsa precisión? ¿No podría eliminar el orden de clasificación y las puntuaciones generales, admitiendo así que el método no es tan preciso y que la diferencia entre # 1 y # 2 – de hecho, entre # 1 y # 10 – puede ser estadísticamente insignificante “.

http://www.stanford.edu/dept/pre…

Mucho se ha escrito sobre la forma en que se clasifican las instituciones de pregrado. Aunque existe una opinión predominante de que las “clasificaciones” no importan, eso no es realmente realista. Los estudiantes, los padres (especialmente) y los empleadores tienen todos los rankings de referencia, especialmente para las escuelas fuera de su conocimiento inmediato.

Así es como el sistema de clasificación actual se desglosa por USNews (el gran jugador aquí):

Reputación académica de pregrado (ponderación: 22.5% para universidades nacionales y colegios nacionales de artes liberales; 25% para universidades regionales y colegios regionales)
Graduación y retención de estudiantes de primer año (20% para las universidades nacionales y colegios nacionales de artes liberales y 25% para las universidades regionales y colegios regionales)
Recursos docentes (20%)
Selectividad estudiantil (15%)
Recursos financieros (10%)
Rendimiento de la tasa de graduación (7.5%)
Alumni dando tasa (5%)

Aquí hay un resumen de lo que les importa a los estudiantes de la NACE (asociación nacional de empleadores universitarios):

Las principales razones señaladas como muy importantes para seleccionar la universidad a la que asistió
Los graduados obtienen buenos trabajos (56.5%)
El costo de asistir (41.6%)
Una visita al campus (41,4%)
Quería ir a una escuela del tamaño de esta universidad (39.8%)
Los graduados obtienen admisión a las mejores escuelas de posgrado / profesionales (34.6%)

Por supuesto, uno no puede generalizar medidas objetivas como el “tamaño de la escuela” en una clasificación, así que concentrémonos en los puntos que se pueden clasificar:

Los graduados obtienen buenos trabajos: esta estadística no está presente en el ranking de USNews. Sospecho que debido a que la mayor parte de la información es auto reportada, es más difícil rastrear esta pieza. Recientemente, las escuelas de derecho fueron convocadas para jugar sus estadísticas con esta información.

El costo de asistir: debe haber alguna medida de ROI relacionada con los salarios ganados a lo largo del tiempo

Lo que ambas listas ignoran: Aprendizaje

¿Por qué se supone que todos los que van a todas las universidades han alcanzado el mismo conocimiento? Sé que el trabajo del curso es relativamente consistente en todas las escuelas, y la enseñanza es mejor en algunos que en otros. Pero las clasificaciones anteriores se centran en la investigación (recursos del profesorado) sobre la enseñanza (incrustada en la “reputación académica de pregrado”).