Teacher teachingLa confiabilidad se refiere a la consistencia del proceso de medición y es uno de los criterios clave para una medición sólida de un resultado o proceso escolar.

Las mediciones tienden a ser más confiables cuando incluyen un gran número de preguntas y cuando existen métodos prescritos para recabar los datos, codificar las respuestas y asignar calificaciones.

La confiabilidad se evalúa por lo general con un cociente que va desde 0 hasta 1.0, donde 1.0 es perfectamente confiable. La mayoría de las mediciones utilizadas en nuestras encuestas tienen cocientes de confiabilidad que van desde 0.80 hasta 0.95, los cuales son muy adecuados para orientar las políticas y prácticas escolares.

Para las mediciones de resultados estudiantiles no cognitivos, como la autoestima, los investigadores evalúan típicamente la consistencia interna de la medición, la cual ofrece una indicación de lo bien que se puede discriminar entre los integrantes de la muestra. Típicamente, se requieren de 5 a 6 preguntas bien formuladas para lograr una medición lo suficientemente exacta para diferenciar entre los individuos. Por ejemplo, la medición de la autoestima de NuestraESCUELA se basa en seis preguntas y tiene un cociente de confiabilidad de 0.91. Esto es bastante alto y sugiere que podemos distinguir con confianza entre alumnos con niveles bajos y altos de autoestima. También sugiere que, si evaluáramos a un grupo de alumnos en cierta ocasión, usando las preguntas de NuestraESCUELA, podríamos volver a evaluarlos en una fecha posterior con las mismas preguntas y los resultados de las dos evaluaciones tendrían una correlación sumamente alta.

AA053043La confiabilidad de la calificación individual de un alumno es distinta de la confiabilidad de una calificación global que se presenta para una escuela. Para mediciones de los resultados no cognitivos de los alumnos, requerimos de mediciones que sean confiables a nivel individual, pero también nos preocupa lo bien que podemos distinguir entre escuelas cuando se trata de niveles promedio de un resultado o del porcentaje de alumnos que califican por abajo o por encima de un umbral definido.

En la mayoría de las aplicaciones de NuestraESCUELA, los planteles usan sus resultados para determinar lo bien que les va en ciertos aspectos escolares, como el sentido de pertenencia de los estudiantes en la escuela, o aspectos del clima escolar como las relaciones entre maestros y alumnos. Los resultados no se utilizan para comparar a alumnos en lo individual ni para identificar a alumnos que sufren de ansiedad o depresión. Casi todas las mediciones tienen una confiabilidad por encima de 0.80 a nivel de escuela, lo cual es lo suficientemente alto para respaldar decisiones de política a este nivel.

 

Confiabilidad de mediciones de NuestraESCUELA a nivel de alumno y de escuela, 2010-11.

Siguiendo el ejemplo de la autoestima, el cociente de confiabilidad a nivel plantel del ‘nivel promedio de autoestima’ de una escuela es 0.81. Esto nos demuestra que las escuelas varían en cuanto a los niveles promedio de autoestima de los alumnos, lo cual sugiere que podemos distinguir de manera fiable entre escuelas con altos y bajos niveles de autoestima. La confiabilidad de la calificación de una escuela depende del número de preguntas y del proceso de administración de la misma, así como del número de alumnos que completan la encuesta dentro de la escuela y el grado de variación natural de las escuelas con respecto a un resultado en particular. Por ejemplo, la medición de NuestraESCUELA de la ansiedad estudiantil es razonablemente confiable en el nivel individual – 0.84 – pero su confiabilidad en el nivel de plantel es bastante bajo, 0.69. Esto significa que, si bien podemos discernir de manera fiable cuáles alumnos sufren de ansiedad moderada a severa, somos menos capaces de determinar cuáles escuelas tienen una prevalencia alta o baja de ansiedad estudiantil.

Para las mediciones de ciertos procesos escolares, como las ‘relación maestro-alumno’, sólo nos interesa la medición de la confiabilidad a nivel plantel. De hecho, preferimos preguntas en las que los alumnos de una escuela sean consistentes en sus juicios. Por ejemplo, la confiabilidad a nivel plantel de ‘tiempo efectivo de aprendizaje’ es 0.94, lo que indica que podemos distinguir de manera fiable entre escuelas para esta medición. La Tabla 1 (arriba) muestra los coeficientes de confiabilidad basados en la aplicación 2010-11 de la Encuesta Estudiantil de NuestraESCUELA.