¿Qué dice la investigación sobre qué tan bien funcionan las evaluaciones de cursos?

Answer 1

Divulgación completa: mi cónyuge y yo somos instructores. Entre los dos hemos trabajado en 6 universidades de todo el país. A veces nuestros “promedios de curso” son excelentes, a veces terribles.

Los resultados de la investigación: por lo que he leído, se ha demostrado que las evaluaciones tienen dos grandes fallas
(1) Los estudiantes no son muy buenos para reconocer cuándo han aprendido algo bien. Son buenos para reconocer cuándo han recibido el producto que esperaban y son buenos para reconocer cuándo se sienten seguros.
(2) Los estudiantes (como casi todos los demás) tienen prejuicios, de modo que dos profesores que se desempeñen exactamente de la misma manera en la clase serán evaluados de manera diferente si tienen géneros / acentos / edades diferentes.

Evidencia:
Confundir a los estudiantes para ayudarlos a aprender
Cita monetaria: “Pero cuando el Sr. Muller analizó los resultados de las pruebas que administró a los estudiantes antes y después de mostrarles los videos, notó algo extraño: los estudiantes que habían visto los videos más confusos aprendieron más. Los estudiantes que vieron los videos los videos más directos aprendieron menos, pero se fueron con más confianza en su comprensión “.

“¿Cómo estoy?” Problemas con las calificaciones de los instructores y cursos de los estudiantes (detrás de un muro de pago)
Resumen de un experimento mencionado en el artículo: “El profesor Ceci, un maestro veterano del curso de Psicología del Desarrollo en Cornell, dio el curso consecutivamente en los semestres de otoño y primavera un año. Entre los dos semestres, visitó a un consultor de medios para recibir lecciones. sobre cómo mejorar el estilo de presentación. Específicamente, el profesor Ceci fue entrenado para modular su tono de voz más y usar más gestos con las manos mientras habla. Luego, en el semestre de primavera, procedió a dar un curso casi idéntico (verificado verificando las grabaciones de sus conferencias) desde el otoño), con la única diferencia significativa de la adición de gestos con las manos y variaciones en el tono de voz (política de calificaciones, libros de texto, horas de oficina, exámenes e incluso el perfil demográfico básico de la clase se mantuvo igual). El resultado: las calificaciones de los estudiantes para el semestre de primavera fueron mucho más altas, generalmente por más de una desviación estándar, en todos los aspectos del curso y el instructor. Incluso el libro de texto fue calificado h casi por un punto completo en una escala del 1 al 5. Los estudiantes en el semestre de primavera creían que habían aprendido mucho más (esta calificación aumentó de 2.93 a 4.05), aunque, según Ceci, de hecho no habían aprendido más. , medido por los puntajes de sus exámenes. Nuevamente, la conclusión parece ser que las calificaciones de los estudiantes están fuertemente influenciadas por factores cosméticos que no tienen ningún efecto en el aprendizaje de los estudiantes “.

Los estudiantes en línea otorgan a los instructores mejores calificaciones si creen que los instructores son hombres
Presupuesto de dinero:
‘Los estudiantes se dividieron en cuatro grupos de discusión de 8 a 12 estudiantes cada uno. Una instructora lideró a dos de los grupos, mientras que un instructor masculino dirigió a los otros dos.
Sin embargo, la instructora le dijo a uno de sus grupos de discusión en línea que era hombre, mientras que el instructor le dijo a uno de sus grupos en línea que era mujer. Debido al formato de los grupos en línea, los estudiantes nunca vieron ni escucharon a su instructor ‘. . . .
“Encontramos que el instructor que los estudiantes pensaban que era hombre recibió calificaciones más altas en los 12 rasgos, independientemente de si el instructor era realmente hombre o mujer”, dice MacNell. “No hubo diferencia entre las calificaciones de los instructores masculinos y femeninos reales”.
En otras palabras, los estudiantes que pensaban que las mujeres les enseñaban dieron puntajes de evaluación más bajos que los estudiantes que pensaban que los hombres los enseñaban. No importaba quién les enseñara realmente.
El instructor que los estudiantes pensaban que era un hombre recibió calificaciones marcadamente más altas en profesionalismo, imparcialidad, respeto, elogios, entusiasmo y prontitud.
“La diferencia en la calificación de puntualidad es un buen ejemplo para la discusión”, dice MacNell. “El trabajo de clase fue calificado y devuelto a los estudiantes al mismo tiempo por ambos instructores. Pero los estudiantes instructores que pensaban que eran hombres recibieron una calificación de 4.35 sobre 5. Los estudiantes instructores que pensaron que era mujer obtuvieron una calificación de 3.55 “. ‘

Otro punto, no basado en la investigación:
A veces puede tomar meses o años para que los estudiantes lleguen a apreciar un servicio o mal servicio hecho por un maestro. Stanley Fish tiene una columna famosa (en círculos académicos) sobre este http: //opinionator.blogs.nytimes…

Answer 2

Casi todo lo que he leído sobre ellos sugiere que son basura. No “trabajan”.
El mejor uso que puede hacer de ellos es tratarlos como “opiniones de los estudiantes sobre la instrucción”. Probablemente no deberían tener mucho peso en ningún tipo de proceso de evaluación que la universidad utiliza para la tenencia o promoción. O cualquier otra decisión importante al respecto. Ciertamente no voy a perder el sueño por ellos. Entonces, a nivel institucional, son inútiles.

Sin embargo, dicho esto; Yo personalmente los encuentro útiles. La mayoría de las personas que se toman en serio su enseñanza recomiendan que los use de esta manera: eche un vistazo a los puntajes. Si varios de los estudiantes le otorgan bajas calificaciones en las categorías “está preparado”, “conoce el tema”, “está entusiasmado con el material”, “ofrece comentarios útiles”, etc., eso es digno de mención. Debería pensar por qué es así y cómo podría mejorar potencialmente. Un jefe de departamento probablemente debería vigilar estas tendencias para su facultad. Los programas de tutoría entre pares y el apoyo del profesorado contribuyen en gran medida a mejorar la calidad general de la instrucción. Si su presidente lo invita a conversar para discutir por qué todos sus estudiantes piensan que usted es desorganizado o irrespetuoso o que no está preparado o que nunca vuelve a calificar, eso dice mucho sobre la actitud de los departamentos hacia la enseñanza también. Proporciona un poderoso incentivo para mejorar tu juego. Su presidente vota sobre su decisión de tenencia.

Sin embargo, lo más útil son las preguntas de respuesta gratuita. -> a veces los estudiantes hacen comentarios muy agradables que te dan las cálidas peluches y hacen que todo parezca que vale la pena. A veces, los estudiantes hacen comentarios ignorantes y / o sarcásticos de los que luego puedes reírte con tus otros amigos profesores. La mayoría de las veces ese es el problema, los estudiantes flojos que están locos que fallaron. Esos comentarios son anónimos, pero si la clase tiene 12 personas y he calificado aproximadamente 30 de sus tareas, sé quién es usted. Algunas veces los estudiantes harán sugerencias realmente útiles. Los mejores formularios de evaluación son los que puede hacer usted mismo. Hacer preguntas como -lo que menos les gustó y lo que más les gustó, y por qué, qué funcionó bien para ellos-, lo que desearon que fuera diferente realmente puede ayudarlo a desarrollarse como maestro.

Entonces, el uso principal es si los estudiantes brindan comentarios honestos y constructivos con ejemplos concretos de lo que les gustaría mejorar y por qué. Esos comentarios son dorados. Nadie te enseña a enseñar a nivel universitario. Es extraordinariamente útil si los estudiantes están dispuestos a darle comentarios honestos y respetuosos para que pueda crecer.