 Buenos días a todos por vostra presencia, gracias en primer lugar por vostra presencia hoy aquí, también por suposta a todos os que habéis venido de fora de Madrid por el esfuerzo que supone asistir a estas jornadas e permitirme também darle las gracias a nuestra primera ponente, Amberit, que se ha hecho todo o viaje desde Enuroga para poder estar aquí hoy con nosotros. Muy rápidamente deciros que en relación a lo que ha comentado la secretaria de Estado e el director general, deciros que estamos trabajando intensamente en la difusión de las informaciones, de las conclusiones de los principales estudios internacionales, PISA de la OCD o Team Cipils de la IA, e bueno, trabajando en la posibilidad de que toda esta información, de que las preguntas que se utilizan, que se emplean en este tipo de pruebas y que las principales conclusiones lleguen na medida posible a nosotros centros educativos e a los profesores que sonos que están aí na primera línea trabajando con os alunos. A este respecto, deciros que justo ayer comenzó o brazo de inscripción del MOC, o Massive Online Open Course, un curso masivo abierto a toda la comunidad educativa realizado por el INTEF e por INE, un curso portanto del Ministerio de Educación en el que se va a trabajar las preguntas que han sido utilizadas en las pruebas internacionales de secundaria, PISA e de primaria como teams e PILs. Os invito a todos a que, bueno, le díso unha oportunidade, entreis en la página web de EducAlab e veais el curso e, bueno, pues lo difundáis entre los profesores e docentes que conozcáis. Creemos sinceramente que es un curso que merece la pena e que va a permitir difundir todas estas pruebas internacionales en las que España participa. Diciros también que como documentación al entrar en estas jornadas se os ha ofrecido un ejemplo o ejemplos de preguntas que se emplean en PISA, portanto, preguntas corjidas e codificadas, también ordenadas por el porcentaje de aciertos de alunos español para que, bueno, el que lo desee pueda comprobar fácilmente qual es el nivel de competencia de sus alunos e deciros también que os hemos proporcionado las preguntas liberadas de teams e PILs pruebas que quizás son menos conocidas e que son del organismo internacional ao que representa precisamente Amberit, a guía. Las preguntas de teams e PILs las hemos entregadas separadas por una parte las de cuarto de primaria e por outra parte las de segundo de la ESO, que son la primera vez que se difunden en castellano. Justamente las presentamos ayer para tenerlas preparadas para las jornadas que empiezan hoy. Portanto, son las preguntas que por primera vez se traducen al español e que se ponen a disposición de toda la comunidad educativa. Son preguntas de matemáticas e de ciencias de segundo de la ESO, de la prueba de la IA. Esa es una prova en la que España habitualmente no participa. Participamos en el cuarto de primaria pero hay otros países que participan también en la de segundo de la ESO. Toda esta información a costa de disposición también en la página web se queréis consultarlo. Sin más, voy a presentar a Amberit, pergúntirme que la cliente nos canha en inglés. She is the Director of International Affairs of the Directorate of the Education and Training in the Northridge country, in the Northridge means the education. She has been before for ten years the Director for Research of the Education and Training. She has been also for fifteen years the teacher and professor of advanced math and fight physics at the upper secondary level in the Northridge level. She has had an important role on the international participation achievement in both international organizations in the Ministry of Education and the IA. She has been for twelve years the representative of the Northridge country at the test done by the international education association and the association that both performs educational test to evaluate the students. She has been also for six years the chair of the TALIS Board of Participation countries and also the representatives of the Northridge in the PISA government board. She has been also in the Northridge in the PISA in the international affairs of the Northridge all related with education test achievements and she will share with us her experience and she will have a very interesting conference. So the first she wants to thank you so much and thank you for coming all the way from Northridge here to Madrid. Thank you very much. Thank you for inviting me here. I understand that you are going to make the reforms both curricular reforms also reform of the national assessment system. So what I will do today is to say a little bit about the background for using international assessment and the experiences from those also into reforming a national assessment system as a smile introduce my background is from the Norwegian directorate of education and training where we are responsible for the national curriculum in Norway for primary and secondary and also vocational education and we are also responsible for the national assessment system and the international studies has played a very important role in the development of the curricular reform in Norway in the country and also when it comes to the assessment system we had like a PISA shock in 2001 when we got the first results of PISA and since then we have introduced national testing on primary and also secondary level and we have made a curricular reform based on the definition of our competencies that peoples and pupils should meet at different stages within their education. So let me see how this works. So in my presentation today first of all I would like to say a little bit more about why we have all this international studies and how they can be used I will also give you a short overview of these various studies as I'm here representing the IA as Chair of the International Association for the Allerational Education of Achievement de esta asocia internacional de para acender rendimento educativo que son un nome muy largo e me gustaría que también me centre a ir en los estudios que nos nos hacemos que creo que España está participando en los estudios PISA en los tímes entonces voy a hablar un pouco también de lo que nos nos hacemos con el estudio también. Piobros, por exemplo, voy a hablar de las competencias claves porque me parece que esto es un punto fenomenal de la reforma que están encarando e me gustaría también ver como esto se integra en lo que llamos las competencias del siglo XXI e por último voy a decir un pouco má sobre estas internazionales e estas estudios tienen que formar parte de un contexto nacional más amplio. So first of all I will go into the reason why we have these international assessments and first of all the major focus of the international assessments and our countries to compare the outcomes of their educational systems with countries across the world to be able to see what are the strengths and what are the weaknesses and how can we actually learn from other countries and other systems and see what exactly it seems to work well and how can we generally use to improve our own system. So the international assessments they have what we can call benchmarking functions that means that they produce reliable trends on key competencies and most of these studies they are conducted in many of them every third or fourth of years so that you can actually follow the pressure of the other countries system and the studies they provide indicators on student performance and also on school practices and that is one of the real strengths of this studies that they do not only the pupils skills and competencies and knowledge but they also have a variety of background procedures so that we also from these studies of educational system within a country so in addition to having the benchmarking function the studies also have a very important analytic function it's a very encouraged also a lot of the secondary analysis to use the assessment data in the connection with the all these background information that you get from the questionnaires so that you can actually be able to analyze the relationship of what is actually influencing the performance of the students what is important when it comes to family background what is important when it comes to curriculum curriculum development and what is important when it comes to teaching and teaching practices also we are looking to have schools organized how the autonomy works within countries so there is a very great variety of analysis that can be done based on these international studies and also a very important aspect not very important is the capacity building that participation in these countries because first of all these countries that participate can be acquainted with the top most expertise when it comes to assessments and it's this all over the world and it's possible to draw from that expertise in the different countries and another very important thing is that you get all these which date the sets for further national to read the analysis so for example in my country in Norway when we started working on this assessment system we didn't really have very much national expertise to do all these kinds of things we have a very large list of the international expertise and we had to pass in the international expertise to be able to transmit it at the national level and that way we could share this international information to pass on to the national information as you can see here there is a large variety of international studies and there are different purposes and there are different purposes and there are different objectives and also I would like to say that it is not possible for modern international studies to be able to tell the world all the educational system so that is one to come from different sources so in this sense it is important to analyze the results within the national context and from there to see if it is well coordinated it corresponds well with the national relations and with the national situation in this sense we have two very important parts within these studies here we have the OECD which is already well coordinated e o Estudio Pisa o Estudio Pisa que se inició en el año 2000 es un estudio que se realiza cada tres años el Estudio Pisa evalua estudiantes de 15 años de edad e evalua su competencia en ciencias matemáticas e en competencia lectora entonces además de estos módulos es un módulo máx experimental que evalua en la serie de competencias futuras también se ofrecia los países participantes el Estudio Pisa ha tenido una importancia muy relevante desde o inicio en los años 2000 la OECD también tiene el Estudio Piac que es un estudio para adultos es un estudio donde se evaluan las competencias de los adultos de la España está participando en este estudio en forma de encuesta no tanto en forma de estudio se dirige a directores e se dirige a docentes con la idea de recabar datos sobre su grado de profesionalidad de su desarrollo profesional e de la misma manera sobre el entorno educativo el entorno aprendizaje ederaz o escoldutante ha sido un estudio muy importante a la hora de explicar e de hablar de xoqueios factores que indican como la enseñanza afecta al rendimiento de la aula talis hoy me voy a centrar más en los estudios de nuestra asociación de la IAA se fundó en el año 1958 e e nós nos hemos encargado de las evaluaciones internacionales de los años 60 digamos que los estudios más relevantes son los estudios perles e teams teams estudia evalúa las matemáticas e as ciencias e se realiza en los grados 4 e 8 es decir, el segundo de eso e el tercer de primaria e también temos outro estudio que se realiza al final de las escuelas secuntarias e que estudia matemáticas e física también es posible que un país participe en uno o en dos o en tres módulos de nuestro estudio teams entiendo que España la próxima ronda va participar en teams para el tercero de primaria e el tercero de primaria se sabe que a compresión lectora é a habilidad máis importante para o aprendizaje do resto de as asignaturas também resulta de gran importancia valorar e conocer e asegurarse que estás avisado e que estes e que estes e asegurarse que estas habilidades esta compresión lectora se desarrolla e se aprende de edades tempranas e es un estudio que se realiza cada cinco años e inicio en el año 2001 también es al principio de los años ochenta nosotros había outro estudio anterior para también valorar esta compresión lectora pero el peré se empezó en el año 2001 para valorar na serie de competencias competencias también son muy importantes para las habilidades del siglo XXI es decir competencias de aprendizaje competencias sobre vida para la vida entonces en ese sentido me quisiera referir al estudio ICCS destinado a los alumnos de segundo de sé donde se valora e estudia conocimiento, actitudes e competencia de los estudiantes en relación con la educación e con la ciudadanía es decir como el estudiante actúa e se relaciona dentro de seu entorno también tenemos un nuevo estudio que vio la luz en el año 2013 nombre es E-FILS entiendo que estas siglas pode ser un poquito confusa pero como digo es el estudio E-FILS es un estudio a través del cual se valora e se estudia la alfabetización e los conocimientos informáticos se valora la competencia la hora de manejar informática e se valora una serie de tareas todas tareas e asuntos relacionados con informática además de otras tareas e en último lugar la IR también ha empezado a estudiar la educación infantil temprana cada vez más estamos centrándonos más en las intervenciones tempranas e en la educación infantil el estudio E-FILS es un estudio que valora la política de educación infantil en los países participantes volveré algunos de estos estudios a lo largo de mi presentación bien, entonces ahora vamos a ser un poquito más concreto e vamos a hablar de los estudios de nuestra asociación la IA tal como he dicho la IEA es una organización que ya tiene casi 60 años se fundó en el año 1958 está muy enfocada a la investigación fundaron una serie de investigadores de todo o mundo con el objetivo de proporcionar evaluaciones comparativas a lo largo en varios países la sede principal se encuentra en Amsterdam e además de esta sede de esta oficina central tenemos una serie de oficinas de protestamiento de datos en Hamburg en Alemania los estudios de IA e la propia IEA es un estudio de investigación internacional e independiente los socios son las agencias nacionales de investigación o ministerios nacionales tenemos 78 miembros repartidos por todo o mundo muchos de estos socios están en Europa otros en Asia, también en Latinoamérica e como en África tenemos más de 30 estudios de comparativos sobre el rendimiento educativo mucha de la información e de las experiencias sobre estudios internacionales proceden de la IA nuestro objetivo es dar estos benchmark estas referencias internacionales para ayudar a los legisladores a conocer las fortalezas e las debilidades de sus propios sistemas educativos nos centramos mucho en los datos de alta calidad es decir, las medidas de seguridad e los requisitos para participar en estos estudios o requisitos exigentes e nos centramos distintos aspectos e también seguridad en cuanto al almacenamiento e al análisis de datos porque porque si nosotros nos hacemos preguntas sobre a calidad y los validez de los datos se empezamos a cuestionar la validez de estos datos estos estudios dejaría de tener validez, es decir como digo unos requisitos muy estrictos en cuanto al desarrollo, análisis e almacenamiento de datos de nuestros estudios estos datos de alta calidad vienen como servir como recurso para identificar aquellas áreas que nos preocupan e sobre las que es necesario actuar e también para preparar e para desarrollar reformas educativas en distintos paíces nos hemos visto hasta a fecha que en muchos paíces por ejemplo Noruega que vengo e também en España han introducido reformas educativas porque a raíz de algunos estos estudios se han identificado de habilidades muy profundas e muy serias dentro de nuestros sistemas e también de la misma manera es un objetivo muy importante es el de aportar e contribuir al desarrollo de la comunidad internacional de educadores nosotros como investigadores muy amplio, lo cual quiere decir que no existen muchos expertos en este sentido, todo es el objetivo de nuestra organización es formar esta comunidad de investigadores mundial e a la vez a fomentar el desarrollo de estos investigadores dentro de los paíces respectivos e en los postulados principales de la IEA son la calidad de sistemas educativos un sistema que ha de ser medido por los conocimientos de los estudiantes e por la capacidad de los estudiantes para realizar ciertos tareas es decir, el conocimiento que adquieren los estudiantes digamos que es la prueba de la calidad del sistema educativo que pertenecen los habilidades de los estudiantes están vinculadas con las características de propio sistema y lo que crea e establece las oportunidades de aprendizaje están basadas en el currículo pero sobre también como se enseña como sin parte este currículo dentro de la aula con lo cual aquí tenemos una conexión muy clara entre las habilidades e como los estudiantes recibe la formación de las asignaturas es decir, que pasa dentro de la aula e en el currículo entonces esta es la diferencia que tenemos nosotros en nuestros estudios nosotros nuestros estudios están más centrados en el currículo es decir, cuando se crea un marco para los estudios que está basado en los currículos de todos os países participantes esto no quiere decir que encontrar todo el currículo español en nuestros estudios de LEA porque nosotros negociamos entre los distintos países nosotros buscamos quales son las competencias clave e principales e queremos hacer un enfoque transversal entonces en cualquier caso esta es una cuestión muy importante e también es muy importante poder ver e conectar el currículo sobre como sin parte este currículo dentro de la aula los estudios de LEA no solamente abarca un unas tareas unas tareas muy hable pero también incluye la educación primaria primaria e secundaria en este caso me quiero centrar mucho en la educación primaria e infantil aquí es donde se establecen todas las bases para el aprendizaje y para el rendimiento posterior aquí es donde el estudiante adquieren los conocimientos y las habilidades y estas habilidades que se adquieren en esta edad tan temprana son un buen indicador de lo que va a pasar más adelante es decir, que la educación infantil e la educación primaria es crucial para el desarrollo e para el conocimiento de estas habilidades como digo, nuestros estudios están basados en los prados y xexxnt y diamonds los ejemplos que están basados en lo que pasa en la aula es decir que nós podemos tener cuestionarios para los estudiantes e ver como han experimentado la formación dentro de la aula pero también podemos tener cuestionarios para los profesores para valorar los métodos de enseñanza que utilizan dentro da aula y a partir daí se analizan Además, tal en como indicado, tenemos un campo de actividad muy amplia, es decir, tenemos competencias claves en compresión lectora, matemática, ciencia, también democracia, educación cívica e cidadana e cada vez más, cada vez más, estamos centrando mucho en el alfabetización e los conocimientos informáticos cada vez más importantes a hoy en día a nuestra sociedad, e tal e como he indicado, estos cuestionarios generales proporcionan unha base márica, muy completa de análisis. También, de la misma manera, es posible dentro de nuestros estudios incluir dentro de nuestros cuestionarios opciones nacionales, opciones racionales, es decir, se ustedes querem obtener información específica sobre una cuestión específica para España o para una reacción de España, también se pueden incluir dentro de estos cuestionarios, pero bueno, por supuesto, no han de ser muchas, porque xí no seria un cuestionario realmente demasiado largo. Tal e como he indicado, los estudios de la IEA son estudios de tendencia, no cual indica que nós también podemos medir el desarrollo de los resultados de aprendizaje en un país determinado, también podemos medir los efectos de las reformas educativas o de acciones que se hayan implementado a nivel nacional o a nivel regional con el objetivo de mejorar los conocimientos e rendimientos. Parte de la prueba se repite en todos los ciclos, entonces nosotros defendimos unos ítems ancla, es decir, que son tareas que nosotros repetimos en cada test e entonces estos ítems, estos artículo que se evaluan, son secretos e elegimos aquellos que sean má representativos para la prueba, entonces estas preguntas ancla nos permite ver cuál es la evolución de cada uno de los países en el tiempo. Nosotros hemos realizado estos cuestionarios generales e también hemos valorado os métodos de aprendizaje de enseñanza e también o currículo en las características de profesor e también del estudiante. También vemos que podemos analizar los resultados de relación con el método de enseñanza. Nosotros hemos visto que estos ítems utilizan muy pocos métodos de enseñanza. Básicamente ellos explican a asignatura e a partir de ahí le piden a los estudiantes que realicen una serie de tareas, pero ellos en realidad no comprueban se el estudiante ha entendido bien, tampoco se establecen debates dentro del aula, tampoco se realiza un proyecto a largo plazo dentro del aula, etc. Entonces, esto quizá les resulte un poco extraño, pero nosotros hemos visto que los docentes noruegos también, alguna manera, también hacen seguimiento de los deberes. Entonces, bueno, n'estos ocasiones nos indica que nos indica si el estudiante necesita mállos seguimiento. Entonces, nosotros podemos también ver a raíz de n'estos estudios si esto es una necesidad. También, de la misma manera, estos estudios de tendencia queremos que sea moderno, que sea que estén actualizados e que reflejen bien el entorno da aprendizaje de agendía. Por lo tanto, nós hemos digitalizado estas pruebas. O estudiante Perus tendrá unha versión electrónica del año 2016, es decir, que os países participantes podrán valorar e testar as habilidades de sus estudiantes electrónicamente. También, Tim está previsto que se digitalice que tengo en su versión online en el año 2019. Bien, ahora vamos a referirnos ao diseño de evaluación. Vamos a ver que es importante para construir, para hacer que estas pruebas sean fiables en todos os países e, de esta manera, también incluyan e podan, podan elegir las competencias que queren evaluar. En primer lugar, e esto es aplicable a todos os estudios internacionales ozernesla e a idos de PISA. Nosotros estamos en un marco para la asignatura, es decir, que esta marco para la asignatura está basada en amplios dominios de contenido. Por ejemplo, geometria, ciencias de la vida e define lo que nós llamamos expectativas de rendimiento desde el punto de vista de estos dominios cognitivos. Es decir, de esta manera se define aquello que se espera que haga el estudiante o aquello que el estudiante pueda hacer en función de las habilidades que haya adquirido. Entonces se desglosa en las competencias en función del conocimiento que tiene el alumno sobre la asignatura e explica el estudiante el conocimiento de esa asignatura como razona el conocimiento si el razonamiento es relevante quando aplican este conocimiento a problemas concretos. Esto quere decir que se puede desglosar las competencias no solamente de acuerdo con las valoraciones principales sino también de acuerdo con el conocimiento no solo con el conocimiento que tenga el estudiante sino la aplicación y el razonamiento de este conocimiento. Tambien dentro deste marco tenemos unha serie de objetivos objetivos para las distintas asignaturas en función del grado. Por ejemplo, que esperamos del 4º grado de 3º de primaria en cuanto a conocimiento? Es decir, por ejemplo, en matemáticas qué operaciones matemáticas ha de hacer este estudiante a de aplicar este estudiante Tambien lo mismo para un alumno de grado 8º, es decir, 2º de eso todo esto está basado en el currículo de varios países e en las experiencias e también en el conocimiento aplicado que esperamos que el alumno tenga en su grado respectivo Para ello, nós hemos desarrollado mós creado grupos de expertos por parte de los países participantes creamos este grupo de expertos e este grupo será el encargado de crear e desarrollar este marco para la asignatura Es muy importante porque porque sí, nosotros sí, ustedes defíben participar es muy importante que estos estudios sean relevantes para vuestro propio sistema educativo En adición a un framework para los test también ha desarrollado un framework para o marco para o que podemos llamar o contexto e en ese framework es basado en por exemplo específicos de escuas que se fundamenta en elementos como la talla de las clases en la edad de inicio en el nivel de formación de los docentes todo esto queda unido en el contexto que es importante en el que queremos enmarcar nos datos por exemplo, si trata de un contexto nacional o de la comunidad que es muy importante que tenemos que analizar cuando se mira en la clase también se puede ver las características de los estudiantes e su comportamiento esto es unha parte muy importante de todo este análisis que realizamos En este estudio como dicio anteriormente son estudios de tendencias, es decir que tenemos que crear un margo para la medición de las tendencias o de los elementos fundamentales que queremos ver podemos decir que muchas veces cuando se está midiendo no tenemos que cambiar o margo que medimos significa que tenemos que tener un marco bien claro para la evaluación no tenemos un marco estático tenemos que saber que es el que puede cambiar para esta forma tener o una información e fiable tenemos también que modernizar el estudio tiene que ser válido e adaptarse al contexto real esto es importante para establecer un equilibrio entre una perspectiva más conservadora o outra que se va adaptar a todos los desarrollos que existen quando se midan en las tendencias en particular cuando se analizan en el contexto nacional tenemos que ser capaces de centrarnos en el conflicto para saber como funcionan cuán han sido los cambios que se han puesto en práctica e como esto puede explicar algunas de las modificaciones que se ven en las tendencias tenemos que tomar en cuenta também en el contexto nacional por exemplo por el año pasado muchos de países han tenido su influencia en las prioridades educativas ha habido tan bien en conflitos políticos o desastres naturales en que conllevan cambios en los resultados e tienen que tomar en cuenta cuando analizamos las tendencias asimismo hay cambios en los sistemas educativos como por ejemplo políticas para inclusión e desarrollos curriculares la cultura de la evaluación es también muy importante como se utiliza la evaluación en su país hay cambios en este aspecto cuando se empieza con un nuevo sistema de evaluación e hay que pensar que al principio esto va alterar e mejorar esperamos los resultados obviamente la metodología para as evaluaciones a gran escala es importante en particular cuando hablamos de metodos que ya se han utilizado para de esta forma poder escalar tener estos métodos que nos permiten también tener una perspectiva máis fiable como ha dicho anteriormente muchas veces tenemos este dilema entre las lídias máis conservadoras e el desarrollo del sistema educativo los sistemas cambia cambia alrededor de nosotros los métodos de trabajo e os métodos de society en la sociedad cambia e el tipo de destretas que se necesitan en el trabajo también se ha modificado sufrido un cambio al rápido esto define un marco que tiene que revisarse en cada uno de los ciclos es un elemento muy importante para tener una actualización de esta información e va a permitir vincular en las tareas que ha dicho anteriormente para de esta forma poder tener una evaluación que sea fiable e constante e con el paso del tiempo muchas veces tenemos la información de los ciclos anteriores añadir nuevas preguntas cuándo sea importante muchas veces estamos cambiando la forma de evaluar por ejemplo conocen el caso de PISA en el 2015 habrá auspección electrónica isto quiere decir que para seguir con las tenencias vamos a tener que tener un estudio que nos permita a realizar un puente entre las formas tradicionales de evaluar PISA pero también en la que está fundamentada en la versión electrónica e de esa forma podremos ser capaces de evaluar e comparar en los resultados esto es lo que se llama el sistema que va a permitir establecer estos puentes esto pode ser difícil de ver porque es muy probable que pasar de un exámen en papel a outro electrónico va a tener implicaciones en el rendimiento dos estudiantes no está tan claro que los estudiantes van a tener los mismos resultados si utilizan una prisión papel o utilizan un ordenador para poder analizar las mismas preguntas isto es un análisis que será fundamental para poder analizar el resultado del trabajo algunas veces se tiene que definir sí, tenemos que empezar un nuevo atender que te está formada podamos actualizar lo que estuviamos por lo tanto no tenemos que ser demasiado conservadores o estrictos para mantener algún tipo de estudio de tenencia estos modelos retos que está teniendo que enfrentar como outros evaluaciones internacionales el paso a las versiones electrónicas o como adaptar a las preguntas como colectar esta información para garantizar que este é patinente é fiable e relevante que estas evaluaciones internacionales se fundan para medir los resultados de un sistema educativo en los test internacionales o que tenemos resultados que nos que se completan en el objetivo fundamental non se trata de el rendimiento individual para eso se necesitan las evaluaciones nacionales para crear material de evaluación que es evidentemente amplio para evaluar las distintas competencias que hay muchos tipos diferentes se necesitan un gran número de preguntas para cada una de estas evaluaciones tenemos tantas tareas many times que serán equivalente a un examen de 6 o 7 horas entonces esto é demasiado largo para a evaluación debido a esto o que se hace es que tenemos un sistema de rotación es decir que todas estas preguntas que forman parte de todo o conjunto en pequeños cuadernos de digamos que temos unos 10 15 e cada uno dos estudiantes va a responder a uno de estos cuadernos un estudiante va simplemente a participar en una parte pequeña del conjunto de examen de esta evaluación entonces temos muchos resultados y de esa forma podemos tener una definición correta de el nivel de competencias de ese país o de ese sistema educativo es una parte muy importante de los estudios internacionales que se tengan todas estas preguntas que dano una medición afinada del sistema educativo no dan medidas precisas sobre los estudiantes para eso se necesitan unha evaluación nacional para evaluar a los estudiantes por eso no se tiene un feedback sobre la evaluación sobre el nivel de los estudiantes algunos algunas veces tenemos evaluaciones que son más regionales pero va a haber mucha incertidumbre en nuestro caso porque no va haber un desglose preciso de las preguntas en cuanto a nivel regional na final o que se tiene unha muestra importante se tendrán se tienen una medición máxica e precisa siempre queremos que sepan para la evaluación para un estudiante que va a haber 90 minutos e tan bien va a tener en algunos otros ustedes van a ser de 30 minutos serán más cortos esta es la forma tradicional que tenemos de evaluar en cuanto a los cuestionarios de contexto algunos de las cuestionarias son idénticas tende que tener unha variedad de respuestas para obtener información prefisa es por ello que muchas veces las cuestionarios van a los directores de los estudiantes educativos que se preguntas sobre el centro sobre las características el tipo de profesorado esto va integrado también a lo trabajo del IAE así como unas cuestionarias para los profesores sobre la estructuración de las clases sobre las acuidades o metodología principal de enseñanza también se pregunta como se han formado los profesores luego ver preguntas para os estudiantes como les parece la formación que se está dando muchas veces es interesante ver que las respuestas de los profesores y las respuestas de los estudiantes muchas veces no están ajustadas de los profesores responden es muy interesante pero un profesor va a explicar qual es o objetivo en su formación e mucha de la enseñanza e el estudiante va a responder sobre su forma de experimentar el aprendizaje el estudiante va a tener una distinta perspectiva tiene que tener reglas muy precisas para el muestreo en estos estudios internacionales tiene unas supervisores internacionales para que los resultados sean comparables en los distintos países participantes por lo general estas evaluaciones realizan en unos 150 200 centros educativos cada uno en 20, 30 estudiantes o alumnos en cada centro en cada colegión e en esta forma tenemos resultados variados muchos países deciden ir más allá tener un muestreo mayor este seria el caso de España una medición más adecuada incluso por regiones para entrar con maior detalle en lo que hacemos en estos cuestionarios me explique para cada uno de los países o está centrado sobre cuestiones naficionales vinculadas en el currículo como también el sistema de evaluación nacional sobre todas as estructuras del país que se interan para colegión preguntas para el director el colegio educativo para como se organiza el colegio cual es el clima para el aprendizaje cuáles son las características del personal docente cuáles son los recursos educativos disponibles dentro de centro estas preguntas están dirigidos a los directores esencialmente para agunas que destambinan los profesores después tenemos nos los cuestionarios para estudiantes y para los profesores es decir como se realiza la enseñanza de las frases tipo de actividades educativas se utilizan los instrumentos los libros cuadernos todo esto es importante después también se va a ver la evaluación de los profesores estudiantes y muchas veces también tenemos que saber cuáles son las actividades que dan un mayor resultado formativo e y también tenemos distintas evaluaciones que incluyen a los estudiantes e a los padres e aquí estoy entendendo que es simplemente primaria por exemplo o cual es en el entorno de las familias para los importantes es importante e saber como ellos viven el aprendizaje fuera de las aulas queremos saber también el comportamiento sobre las motivaciones de los estudiantes para tener una conexión con los resultados que obtenemos tenemos algunos ejemplos de análisis que realizamos se viramos a los informes internacionales no va a ver mucha información sobre este análisis porque normalmente se hace nacional o incluso regional es un análisis secundario que se hará después del primer paso de recuperación de datos e tal veces están vinculados a factores específicos como por ejemplo conocimientos previos, motivación el entorno familiar sobre la base de información podemos definir perfiles que caracterizan a los alumnos más aventajados para de esa forma que haya maior número de alumnos con muy buenos resultados de alumnos excelentes podemos saber también quale son los retos de los estudiantes para que ellos que tienen máas dificultades e de esa forma competencias de los alumnos refagados podemos decir que cuando analizamos los resultados en los países en los países con mayor nivel de alumnos excelentes tienen un número importante de estos alumnos pero también pueden reducir el número de alumnos refagados de esa forma hay un foco puesto en los alumnos refagados como pueden mejorar es importante de esta forma en los países que tienen mayores resultados solamente en la proporción de alumnos refagados es inferior también está vinculado con políticas de educación, de inclusión en los países que se centran en políticas de inclusión de esta forma se conseguen mejores posibilidades para todos los países e de esa forma los resultados finales de las evaluaciones os peores se pueden también tener perfiles de los estudiantes de los alumnos como le he dicho anteriormente pero también de los centros e de los sistemas educativos para saber quale son los elementos fundamentales de los sistemas excelentes es muy importante el foco que se pone en la autonomía pero también en obtener mejores resultados e obtenerme un mayor proporción de alumnos excelentes e esto está vinculado en general con unos métodos resultados en nuestras evaluaciones bien, entonces aquí tenemos ejemplos más ejemplos sobre como podemos definir como definimos los perfiles de los docentes una de las preguntas que ha sido de maior preocupación para nós es que se necesita que se espera quál son los requisitos de un buen docente es una respuesta que no es fácil de responder nós hemos analizado datos en este sentido e nosotros hemos visto que estos estudios cuantitativos son estudios que tienen un límite en tanto en relación con la información que uno puede extraer nosotros hemos visto quizá a necesidad de tener estudios cuantitativos en este sentido para valorar e ver quales son las características de un buen docente por ejemplo nosotros nos gustaría utilizar en nuestros estudios incluir distintos métodos de enseñanza por exemplo se parece que por ahí hay algún ruido nos dicen entonces por exemplo utilizando los métodos de enseñanza también podemos ver la competencia del docente sobre las asignaturas también en ocasiones vemos como la edad del docente en ocasiones también es importante los profesores o doscentes con máis antigüedad también en ocasiones están máis seguros, connosen máis e están todos nosotros nos hemos centrado en programas para novos profesores para incrementar e trabajar la confianza esto no quiere decir que os profesores como maiores experiencias sean mejores que os profesores con menos experiencia pero sí que es cierto sí que es cierto que la experiencia ayuda a la hora de crear la confianza necesaria, la eficacia necesaria que hace un buen profesor e como digo se necesita información máis específica para obtener una muestra máior e estudiar datos e recompilar información por exemplo a nivel regional por exemplo también se necesita estudiar ou valorar a los inmigrantes que esto también puede ser una pregunta importante una cuestión importante se puede hacer una muestra e se puede valorar se puede hacer una comparación es muy importante en ocasiones también es necesario tener una muestra en este sentido de manera que tengamos mediciones precisas función de los distintos idiomas oficiales bien, ahora vamos a ser un poquito má específicos vamos a hablar de teams bien, en primer lugar me gustaría hablar un poco máis del estudio teams, el estudio de tendencia de largos que nosotros tenemos en primer lugar nosotras lo realizamos en el año 1995 este acrónimo significa que es el tercer estudio de matemáticas, el primero era a finales de los años 60 luego tuvimos teams que foi segundo, los años 70 el tercer a continuación se transformó en tendencias, en matemáticas e ciencias es decir, se realiza cada 4 años e ahora mismo estamos realizando el sexto ciclo es decir, todos hay países que han participado desde el año 1995 con lo cual tienen una tendencia muy exaustiva sobre lo que ha pasado con las matemáticas e ciencias en su país como digo, el estudio teams tiene distintos módulos para el cuarto el grado 4 y el grado 8 aquí vemos que tenen distintas preguntas, preguntas muy largas e a continuación están distribuídos en distintos cuadernos yo creo que nosotros utilizamos unos 13 cuadernos en el nuestro estudio estos cuadernos contienen distintas preguntas sobre los distintos niveles de dificultad y todos los cuadernos también incluyen por una parte preguntas sobre las cuestiones máas difíciles y preguntas sobre las cuestiones máas sencillas para cada ciclo de estudio teams nosotros tenemos una serie de informes los informes de matemáticas son informes muy largos muy detallados que proporcionan muchísima información sobre las distintas situaciones sobre distintas asignaturas sobre las competencias de la misma manera también se ofrecen muchos ejemplos sobre las tareas desempeñadas sobre la descripción de las tareas y sobre la respuesta de los estudiantes a dichas tareas también es muy importante de estopar que en cada ciclo nosotros tenemos un en ciclo pedia es decir, la descripción de los sistemas educativos de cada país de cada país participante ofrece información muy importante a la hora de comparar los distintos resultados estas en ciclo pedias resultan de gran importancia y ofrecen información muy valiosa como digo sobre los distintos sistemas educativos de los países participantes esto es simplemente un ejemplo de las tablas estas son las tablas de los resultados de teams vemos que los países que son los que mejores resultados tiene e en ocasiones o con mucha frecuencia los países europeos están más o menos en la media bueno, unos tiene mejores resultados que otros e en la parte inferior del ranking nos encontramos con los países en pias de desarrollo aquí también vemos una variación entre los países que tiene mejor rendimiento que los que no así que aquí podemos ver quá es la media de teams y aquí vemos resultados para España del año 2011 aquí podemos ver que existen unas serie de retos que tenemos que afrontar a raíz que es necesaria afrontar a raíz de estos resultados tampoco se encuentra muy lejos a España tal y como eu mencionado esto es simplemente un ejemplo de nuestros análisis basados en nuestros cuestionarios nós también vemos que los estudiantes que reciben educación infantil vemos a importancia que eso tiene para los resultados posteriores nós también hemos participado hemos incluido esta educación infantil y aquí hemos visto quá es la influencia que tiene los resultados de los niveles máis altos de educación aquí vemos outra vez una correlación entre los estudiantes de grado 4 e de grado 8 tal e como eu dicio anteriormente estos estudios son estudios que están definidos para ofrecer na serie de referencias de benchmarks internacionales pero cual quere decir que tenemos, hemos definido distintos niveles de referencia en función de los preguntas que nós realizamos e del rendimiento de los estudiantes dentro de nuestro estudio teams estas referencias están divididas en avanzados o exercición de los estudiantes considera un apuntación de 625 o por encima a continuación tenemos un benchmark intermedio e un o bajo entonces básicamente nós mesimos cuántos estudiantes han obtenido el benchmark na apuntación baja o intermedia o alta o avanzada aquí esta es una definición máis precisa o benchmark máis preciso para las distintas asignaturas e para los distintos grados por ejemplo para un grado típico se ofrece una descripción precisa sobre o que se espera del estudiante este es un ejemplo del benchmark con la referencia alta por encima de quinientos de apuntación básicamente los puntos o las apuntaciones en los estados internacionales van a tener alrededor de quinientos quinientos está por encima de la media e por debajo de quinientos es una apuntación baja baja por debajo de la media también como ejemplo vamos tenemos aquí una descripción de una referencia baja en matemáticas es decir el estudiante tiene conocimientos matemáticos básicos pero no tiene capacidad para aplicar para razonar este conocimiento ahora nuestro estudio PIRLS es uno de los estudios máis importantes en tanto que valora la compresión lectora en los estudiantes de primaria también es un estudio de tendencia que vio la luz en el año 2001 no obstante anteriormente sí que teníamos en los años noventa dos estudios que evaluaba la compresión lectora este estudio incluye información muy amplia sobre el apoyo que nos han no reciben en el domicilio sobre o currículo sobre o aplicación del currículo sobre las prácticas de formación y también sobre los recursos escolares también tenemos una enciclopedia que habla de sistema educativo de cada uno de los países y también se describe los resultados reales procedentes de cada una de las pruebas de las evaluaciones es muy importante para este estudio destacar que estos dos estudios se realizaron en el mismo tiempo es decir, simultaneamente es decir quiere decir que en este momento es el único momento que los dos estudios, el teams y el PIRLS se han hecho, han coincididos simultaneamente en cuanto al PIRLS muchos países decidieron hacer que participaran nos mismos centros educativos e nos mismos estudiantes en los dos estudios, en el PIRLS e en el teams porque coincidían en el tiempo report entonces además de un informe ordinario el informe normal tenemos ahora un estudio mucho má profundo que nos ofrece los resultados tanto del PIRLS e del team voy a hablar más adelante tal y como ha dicho estos estudios somos estudios que están en fase de desarrollo que en el año 2016 además del estudio PIRLS habitual habrá la posibilidad de añadir dos módulos uno de los módulos tiene que ver con la comprensión lectora es un módulo má sencillo má facil que tiene que ver estar en los sistemas educativos de desarrollo o en aquellos países en los que tienen un rendimiento académico bastante bajo también este test nos ofrecerá los distintos también tendremos benchmarks también algunos países han mostrado interés para utilizar estos estudios para grados má bajos por ejemplo grados o grado o grado 1 es decir es posible si los países así lo des también la parte realmente inovadora del nuestro PIRLS del año 2016 es que vamos a tener un módulo electrónico para los estudiantes de primaria ellos van a tener que leer textos en os ordenadores van a tener que manejar un entorno informático van a tener competencia para hacer el test para este ser un test muy interesante y muchos países se han mostrado súa interés para participar en el so para esta extremamente boa oportunidade que podemos a esta oportunidade fantástica de la simultaneidad del PIRLS con esto queremos de esta manera hemos cobrido analiza los resultados de ambos análisis de manera conjunta e ver las relaciones que existía entre la competencia matemáticas en fíencia y también el apoyo extra escolar la importancia que tiene para el desarrollo de las competencias lectoras e de fíencias e de matemáticas es decir, a partir de aquí nosotros podemos desarrollar perfiles para los distintos países versiones e vamos a obtener características para mejorar los sistemas educativos Estas 34 países participaron en esta opción todos ellos nos dieron una base muy importante para nuestra análisis este es un ejemplo de lo que podemos ver en este informe combinado, en este informe agregado aquí vemos el perfil que se ha desarrollado para todos los países de estos 34 países que participaron en estos estudios simultaneamente en estas tres competencias y aquí vemos un gráfico tridimensional onde tendemos la apuntuación en compresión lectora matemáticas e en fíencias y aquí podemos ver las civilidades e fortalezas de cada uno de los países aquí en el centro podemos ver el número de estudiantes que obtuvieron la máxima apuntuación en las tres asignaturas y aquí en verde obscuro vemos el número de estudiantes que obtuvieron la maior apuntuación por lo menos en una de las tres asignaturas aquí vemos que sin rapur es un ejemplo de uno de los es el ejemplo del países que tiene el mejor rendimiento es decir, tiene gran fortaleza en las tres países y aquí podemos ver que sus puntos fuertes son las matemáticas e la fíencia y son un poquito más flojos en compresión lectora aquí vemos un ejemplo de un país que ha tenido una apuntuación mediante aquí vemos el maior número de estudiantes que tiene un nivel adecuado en las tres asignaturas y aquí no tenemos ningún alumno que destaquen y vemos pocos alumnos que destaquen absolutamente en una de ellas y aquí vemos que la maior debilidad está en matemáticas y aquí también tenemos el perfil de España unha vez más vemos menos alumnos un número aún menor de alumnos que coxuden la maior apuntuación en todas asignaturas aquí podemos ver también que la maior debilidad en España son las matemáticas e la maior fortaleza y en compresión lectora así que bueno esta nos da unha base unha buena base para evaluar el currículo y la aplicación y la implementación del currículo dentro de Laura nosotros también vemos que el entorno familiar del estudiante resulta muy importante e quizás es uno de los factores que explica los logros en el idioma que se habla en el hogar también la cantidad de libros que también nos da una buena medición de la competencia cultural es decir, si en el hogar también existe un orador o no también tiene su importancia e también la confianza es decir, existe unha relación estrecha entre la confianza, la motivación e el propio aprendizaje no sé si tienen ustedes preguntas antes de que pasen a las competencias para el siglo XXI e como todo esto se pode desarrollar podemos responder ahora a las preguntas o bien después creo que tendremos tiempo para ello yo sé que la competencia es una parte importante en el sistema de asociación e las competencias son definidas unha vez diferentes en diferentes países pero básicamente son basadas en competencias que son necesarias para aprender outros subjetos para ser capaz de actuar en una sociedad colegia e también para actuar para actuar en una sociedad para formar key competencias es unha una competencia genera que se trata de competencias clave que están en todas as asignaturas que son centrales e fundamentales hábitos muchos esforços para definir cuáles son estas competencias claves que son necesarias en la sociedad del siglo XXI se pueden ver muchos cambios en las destrezas necesarias para el mercado laboral por exemplo se pueden ver ustedes que hay una definición colectiva de las competencias transversales que son importantes para el siglo XXI tenemos competencias de laborales también para a vida tenemos ideas que están vinculadas en el aprendizaje en las de la información los medios de comunicación y tecnología y las competencias fundamentales como poden ser en matemáticas o en lectura estas destrezas podemos hablar de la creatividad del pensamiento crítico de la resolución de problemas de la toma de decisiones e del aprendizaje e de formas de trabajar en comunicación e en colaboración también de herramientas para el trabajo como utilizar la información e as tecnologías de la información e como ser estar preparados tener competencias informáticas estas destrezas para vivir en sociedad con destrezas de ciudadanía de carrera profesional de vida es una definición muy amplia para explicar lo que vamos a evaluar e sabemos que es muy importante para nos estudiantes quando entren en el mundo profesional personal son unas misións difíciles de medir un reto e sempre tenemos que preguntarnos se tenemos las medidas correctas se somos capaces de evaluar lo que se transmite a los estudiantes antes que estén las destrezas importantes para integrarse en la sociedad hemos tenido mediciones muy precisas sobre las competencias cabres como por ejemplo la lectura las metemáticas las ciencias estamos empezando a tener mediciones sobre las IFPs también hablado de PISA que ya se están centrando en outra forma de evaluar e saber como las personas están utilizando as tixas e tenemos también novos estudios todos electrónicos IPRs e tixas e queremos tener mediciones sobre el conocimiento de los alumnos pero también sobre comportamientos seu actitud de ciudadanía de democracia e es muy importante centrar-nos en otras destrezas no cognitivas como colaboración resolución de problemas la capacidad de comunicación de racionamiento e de análisis e es mucho más difícil medir estas características pero estamos haciendo un gran esfuerzo para tener datos e que seamos capaces de medir este tipo de destrezas no cognitivas es realmente un ámbito de desarrollo creo que todos tenemos mucho que hacer todavía e es uno de los grandes desarrollos de los estudios del futuro podemos hablar también de los estudios que se están preparando para los años venideros por ejemplo el IFS del 2016 para saber si los jóvenes están preparados para tomar su papel como ciudadanos e saber qual también es el conocimiento e la comprensión de los alumnos e cuáles son sus comportamientos e es creo que tan fundamental como los conocimientos tenemos también el estudio EFILSE del 2013 que permitida que los países van a volver a formar parte deste estudio en 2018 lo que haces un evaluación también de las competencias informáticas e de gestión de información esto tiene materias transversales centra en las capacidades de los alumnos a trabajar en un entorno con ordenadores e que sepa reaccionar a esta realidade se trata de evaluación este por ordenador donde se va un entorno que tiene que ser fácil de reconocer para los alumnos se ha construido un entorno en el que se utiliza internet donde se utiliza lo mismo que las habilidades que nuevamente tenemos con un ordenador aviario los resultados serán muy interesantes para saber como podemos captar a información que nos va a llegar creo que el primer informe nos dará máis luz sobre esto el 20 de noviembre para ser máis exactos después estamos pasando por ejemplo un ordenador que va pasar de su versión en ordenador se está transformando la evaluación en los distintos países que participen es muy importante comprender o que significa para la evaluación e es como se van a poder evaluar las mismas competencias muchas veces este también da la capacidad de evaluar las competencias que no se pueden hacer en un entorno con la PIPA PEL lo máis importante o máis novedoso es el ETIMS para el 2019 el objetivo consiste en transformar el ETIMS desde su versión en la PIPA PEL a la versión informatizada desde esta forma el contexto es diferente en cuanto a la situación e os recursos necesarios también queremos que los países estén preparados para participar en ellos aún así habrá países que seguirán utilizando a versión en PAPEL o incluso os dos versiones hemos visto que también os ordenadores tradicionales también se están cambiando en ás propias aulas e agora se utilizan as tabletas estos son esos metos máis fáciles máis baratos e es más fácil que los países puedan tener tabletas para os estudiantes en sus aulas por lo tanto os dispositivos, os medios van a cambiar e vamos a pasar al formato de tabletas e no del ordenador e os bastones fundamentales é que seremos capaces de evaluar áreas máis complejas por exemplo se podrán simular experimentos de fianfias isto não se pode hacer sobre o papel pero se pode hacer con un ordenador a esa forma tendremos una forma de evaluar máis interesante máis comprometida e que pode implicar máis motivación e se va a evaluar também las matemáticas a través de esta versión digitalizada queremos que este de esta forma podamos tener máis maior motivación para los exámenes pero tener a la par una evaluación fiable e prefisa de los resultados así como actualizado también a la forma de utilizar estos datos estos estudes de evaluación coñevan mucho trabajo, muchos recursos pero por si solos não van a poder rea dar un ímã de sistema educático de un país por tanto estas evaluaciones forman un sistema de evaluación de un país tienen que analizar en un contexto nacional e isto é fundamente como he dicho ás unas de las competencias clave en las que queremos centrar no tienen una forma fácil de ser evaluadas e por lo tanto queremos tener buenos indicadores aunque no tengamos la imagen máis completa pero podrón menos queremos tener unos indicadores de claros sobre el rendimiento do sistema educativo nacional me gustaría regalcar que se quiera entener e un análisis de las políticas educativas que sea fiable se tienen que analizar os estudios nacionales vinculados con los datos nacionales e las investigaciones nacionales para dar un ímã de información sobre este tema e os estudios internacionales van a dar una imagen de lo que está ocurriendo en los estados educativos para ellos necesitan datos regionales e locales e o que é fundamental para ver como se está desarrollando as situaciones en el torno se tiene que poder comparar con los datos nacionales se necesitan datos estadísticas internacionales e investigación e evaluación nacional para tratar de triangular esta información e establecer vinculos con outros estudios qualitativos por lo tanto se utiliza este abanico es posible establecer un sistema de evaluación nacional e tener información válida sobre o sistema educativo por último me gustaría entrar en algumas de las preguntas dilemas a los que nos enfrentamos quando establecemos un sistema de evaluación obviamente como investigadores se queden tener tantos datos como sean posibles a fin de tener un buen análisis e en paralelo se necesitan centrar la atención en la representatividad para saber se estos datos son representativos de todo o sistema que se quede analizar e se tiene que también ver qual son los elementos que causan una cierta fatiga en estas evaluaciones e se realmente centros educativos con ojos de frustración não permite tener una información quizás lo máis fiable posible me he dicho que ha habido cambios desde a opción en papel informatizada e isto va a tener una influencia sobre os resultados es muy importante que haya información fiable para que sepamos qual va a ser o impacto desta transición en estos resultados finales por último me gustaría decir que haya correlaciones versos efectos causales es xas veces xas nadres quen saber exactamente qual es los efectos de realizado na nova política e xas veces nos encuentran efectos causales o que se encuentra son correlaciones se puede ver que una organización tipo de organización por ejemplo va a dar mejor resultados o hay efectos de elementos de entorno unha correlación con cientos resultados pero no se puede ver que haya unha causa efecto e isto se tiene que ser muy prudente quando se passe a la interpretación de los datos hay que definir características correlaciones pero es muy bífil establecer unha causa efecto en educación muchas veces es máis difícil porque quando se está en un centro vocativo no sólo hay un tipo de intervención se trata de mejorar a enseñanza de distintas formas va a ver distintos tipos de reformas de prioridades e todo esto llega a las aulas es muy difícil por lo tanto encontrar el efecto de sólo un tipo de intervención pero muchas veces se puede encontrar es que cuando se mejora en los recursos o hay algún tipo de cambios hay resultados tan bien mejorados pero no es sólo por un elemento ese es el mensaje fundamental que te queria transmitir outro elemento que no he citado anteriormente es es la evaluación adaptativa es decir que estas evaluaciones se sean todavía máis pertinentes para os estudiantes es fundamental en los objetivos por ejemplo en la evaluación se va a adaptar a todas as perguntas esto es una forma de tener evaluación máis precisada de realmente cuál es el nivel máis alto esto es algo que está llegando todavía no está en las evaluaciones internacionales pero muchos países están tratando de integrarlos en sus evaluaciones nacionales tenemos cobertos también sobre las desresletas no cognitivas hemos visto que medimos lo que podemos medir algunas cosas es decir que no tenemos evaluaciones que van a permitir tener una imagen perfecta e es importante que nos encuenta porque estas destretas son muy importantes inclusive máis que algunas desretas cognitivas e tienen que recalcas en las aulas aunque sea difícil evaluar es un elemento fundamental no vamos a tener evaluaciones que van a poder captar toda una información o todos os elementos del sistema educativo pero van a dar unos indicadores e nos permitirán estabilizar co relaciones con las desretas cognitivas e no cognitivas por último palavras sabias da enseñanza efectiva puede que sea a la tarea máis ardua e es una forma realmente reconocer el trabajo del profesorado e cualquier forma de evaluación auténtica e se tiene éxito va a permitir dar unas mesores condiciones de las que ya existían gracias bueno después de esta intervención tan interesante de Amberit vamos abrir un pequeno espacio para preguntas en caso de que alguien tenga alguna pregunta para nuestro aponente parece que ha sido suficiente con su intervención así que damos por finalizada esta ponencia muchas gracias