 Hola, soy Ruta Almeida y trabajo en el Instituto Nacional de Evaluación Educativa. Como habíamos prometido, vamos a desvelar algunas de las dudas más frecuentes relacionadas con las evaluaciones educativas internacionales. La primera pregunta que nos podemos hacer es cómo se seleccionan los estudiantes que van a participar en el estudio, es decir, cómo se selecciona la muestra. La respuesta esta pregunta depende de cada evaluación, pero si es verdad que todas tienen una parte en común, y es que su muestra debe representar a la población de estudio. Para cada comunidad se escoge una muestra proporcional al tamaño de su población objeto de estudio. Este proceso se divide en dos fases, el primero la elección de los centros y el segundo para cada uno de ellos la elección de los estudiantes. Para la elección de los centros se realiza una nueva stratificación atendiendo a las distintas características de los centros educativos, por ejemplo la titularidad del centro, como puede ser público o privado. De esta manera los centros quedan agrupados en distintos estratos, según sus características. Hay que tener en cuenta que dependiendo del tamaño del centro tienen una mayor posibilidad de seres seleccionados, ya que su probabilidad de ser escogidos es proporcional a su tamaño. Una vez seleccionados los centros se escogen a los estudiantes de manera aleatoria y dependiendo de cada evaluación, es decir, para PISA por ejemplo se seleccionan 35 estudiantes de entre todos los alumnos de 15 años del centro. En cambio para Teams y Pils se seleccionan dos clases de cuarto de primaria en el caso de los centros grandes y sólo una para aquellos centros más pequeños. Pero una vez que tenemos la muestra hay que recoger los datos, para ello contamos con los cuestionarios de contexto y las pruebas de conocimiento. Aquí tenemos un ejemplo de cuestionario de contexto en el que se recoge información personal familiar del entorno escolar entre otros datos. Por otro lado las pruebas de conocimiento son la parte central de la mayoría de las evaluaciones, por eso debemos tener en cuenta su contenido, es decir, las unidades de evaluación. Como ya se ha visto a lo largo del curso, la selección de las unidades depende de dos fases. En la primera un grupo de expertos diseña una prueba piloto que proporcionará información cuantitativa para una segunda fase en la que se clasificarán los ítem por nivel de dificultad y que serán aceptados o rechazados según la teoría de respuesta alite. Aquí podemos ver dos ejemplos de unidades de evaluación que fueron propuestas para una prueba piloto de pisa. Uno aceptado y otro rechazado. La aceptación o rechazo de los ítem depende de su adecuación al nivel para el que fueron diseñados. Para ello debemos saber qué es la teoría de respuesta al ítem y si quieres saber más sobre este método puedes consultar la zona de recursos en la que se ha incluido bastante material. Una vez que tenemos los datos debemos organizarlos en tablas que forman las bases de datos. Aquí podemos ver un ejemplo pero estos datos debemos analizarlos de manera minuciosa para detectar posibles anomalías. Ejemplos, tenemos el caso de datos en blanco como podemos ver aquí donde una respuesta no ha sido contestada. También por otro lado tenemos otro ejemplo que son los datos erróneos que deben ser tratados como el caso en el que se proporcionan dos respuestas cuando se señalaba que solo debían marcar una opción. Estos datos se analizan de distintas perspectivas. Primero se realiza un análisis de la descripción de las características de los individuos participantes y posteriormente se intenta establecer relaciones entre los resultados de las pruebas de conocimiento y las características de los individuos. Estas han sido algunas de las pinceladas sobre el proceso que se lleva a cabo para analizar los datos de las evaluaciones. Si quieres conocer más sobre algunos de los puntos tratados puedes visitar la zona de recursos. ¡Hasta pronto!