Buenos profesores malas calificaciones

La evaluación del profesorado es, y siempre ha sido, muy complicada. Esto lleva a cuestiones absurdas, como el hecho de que para acreditarte como profesor universitario la investigación te la evalúan por su calidad, mientras que la docencia se evalúa "al peso". Sin embargo, por muy absurdo que sea es un problema difícil de resolver, porque no sabemos bien cómo evaluar a un profesor* de una manera objetiva y fiable. 

Una medida cada día más en boga es la evaluación por parte de los alumnos. Esto ya existía cuando yo hice la carrera, allá por el pleistoceno, pero que yo sepa era y sigue siendo algo totalmente consultivo en España. En otros países y otras universidades, como las estadounidenses, sí se suele usar más para evaluar al profesorado. Sin duda, es un método objetivo, en cuanto a que se obtiene una nota numérica difícil de trampear por parte del profesor, y con un par de años ya se tiene una buena estadística, pero la pregunta es ¿es indicativo de una buena enseñanza?

Pues aparentemente no lo es, o al menos eso afirma una reciente publicación en la revista Economics of Education Review. El artículo en cuestión se titula Evaluating students' evaluations of professors, y es una colaboración de profesores de economía italianos y suizos.

El principal problema a la hora de hacer este tipo de estudios es como definir "buen profesor" o "buena enseñanza". Para eso los autores utilizan la filosofía de que un buen profesor ayuda a que los alumnos tengan éxito en el resto de sus estudios. Básicamente, si tienes un buen profesor de Economía I, es de esperar que te vaya mejor en Economía II. Basándose en esta definición hicieron un estudio comparativo entre el subsecuente éxito de los estudiantes y la evaluación de los mismos a sus profesores. 

El análisis estadístico del artículo es bastante complejo. Por ejemplo, evitan evaluar cursos donde los alumnos seleccionan a los profesores, ya que esto puede incluir un sesgo. Además, hacen infinidad de análisis distintos para evitar otro tipo de sesgos. El que esté interesado siempre puede consultar el paper técnico. 

Las conclusiones de los investigadores no motivan mucho a la hora de usar las evaluaciones estudiantiles como medida. Los estudiantes evalúan a los profesores en función de su conveniencia, no de la educación recibida, y a menudo los mejores profesores (siempre medidos por la definición anterior) reciben peores calificaciones. Por otra parte, los profesores que ponen mejores notas obtienen mejores evaluaciones de sus alumnos. Esta figura resume estos resultados.

 

A la izquierda se comparan las evaluaciones de los alumnos (eje vertical) con la calidad medida mediante el éxito futuro (eje horizontal). A la derecha se comparan las evaluaciones estudiantiles con las notas. En ambos casos se puede ver una tendencia, aunque la variabilidad es enorme, como suele ocurrir en estos estudios, y la regresión lineal es altamente ineficiente. Por estos motivos no considero que se pueda concluir firmemente que los mejores profesores reciban peores calificaciones, ya que hay muchos casos de buenos profesores (como Walter Lewin) con buenas calificaciones y de malos profesores con malas calificaciones.

En cualquier caso, lo que muestra muy bien el estudio es que estas dos medidas no están fuertemente correlacionadas. O consideramos que los buenos profesores son los que reciben buenas calificaciones de sus alumnos, o consideramos que son aquellos que consiguen que sus alumnos luego tengan éxito académico. En mi opinión, esto debería ser suficiente para que no basemos la evaluación de la calidad docente exclusivamente en este tipo de encuestas. 

Por último una reflexión. Ya hemos visto que con correlación o sin ella, hay de todo. Se puede ser un buen profesor y obtener una buena calificación, pero también hay buenos profesores que no la obtienen. Si tuviérais que elegir entre enseñar bien o ser queridos por vuestros alumnos, ¿qué elegiríais?

*Entiendase siempre el masculino como neutro, por no repetir continuamente "profesor o profesora" o "alumnos y alumnas". No hay ningún análisis de género en el post.