domingo, 21 de diciembre de 2014

Despedida

El próximo  22 de diciembre el MOOC "Preguntas PISA y TIMSS" acaba.  
No quiero cerrar  sin compartir  algunas cosas:
- He vivido una satisfactoria y gran experiencia
- El MOOC ha cumplido con mis expectativas. 
- He contagiado a algunos compañeros acerca de las pruebas y les he facilitado el enlace del INEE. El próximo año trabajaremos en todas las áreas de competencias con ellas.

Desde estas líneas quiero agradecer su esfuerzo por acercarnos a estas pruebas a Alba Reboredo, David Cervera, Juan Carlos Mejía y Mª Jesús García. También quiero agradecer a todos los participantes del MOOC lo mucho que he aprendido de ellos.

Hasta pronto. 


Unidad 5. Actividad 5. Aplicación de una prueba

En esta última actividad del MOOC se nos pide que seleccionemos cuatro unidades de evaluación (estímulos, ítems y guías de codificación) de alguno de los estudios internacionales, que encontraremos en la página del INEE. Debemos elegir aquellos que más se ajusten al nivel y materia que estemos impartiendo. Elegido el material debemos pasarlo a nuestros alumnos. Para corregir seguiremos la guía de codificación para así poder comparar los resultados que has obtenido con las puntuaciones internacionales. 
Estas son las pruebas que hemos pasado a nuestros alumnos y alumnas

Propuesta de evaluación:
Edad: 17-18 años (20 alumnos de 2º de bachillerato (Ciencias Sociales ) del IES Las Lagunas)
Competencia financiera
Materia relacionada: Guías y Rutas Turísticas por España y Andalucía
Tiempo: 1 hora
Contenido curricular a trabajar:  En el mercado,  Nómina, Acciones, Factura

Análisis y conclusiones:
He pasado la prueba a 20 estudiantes voluntarios de segundo de bachillerato a no impartir más que esta docencia este curso escolar. Estudian la modalidad de Ciencias Sociales, por lo que he elegido una prueba de Competencia financiera (PISA 2012). Están al corriente del vocabulario tratado: Opción de gastos, Dinero para viajar, Nueva oferta, En el mercado, Nómina, Fallo bancario, Nueva tarjeta de crédito, Acciones, Seguro de motocicleta, Factura. De estas propuestas tenía que elegir cuatro y me quedé con mercado, nómina, acciones y factura. Es un vocabulario, como he dicho, que ya forma parte de su vida y que comprenden.  Las preguntas elegidas se contestan con respuestas de distinta modalidad.
En cuanto a los resultados, he de decir que el alumnado reaccionó bien a la prueba y sus resultados han sido muy aceptables. Entre otras cosas porque en verano algunos de ellos han trabajado. Quizás si se lo hubiéramos pasado a un alumnado de menor edad no habría sido tan venturosa

Unidad 5. Actividad 4: Charla 2: Cómo se analizan los datos. Interpretación de resultados.

Tampoco pude  asistir a esta segunda charla en directo.  (15 de diciembre) Recurrí, por tanto, al vídeo que después se subió



Fue conducida por los siguientes expertos: Ismael Sanz, Ruth Martín, Luís Sanz y Javier Crespo; conducida por MJ García.

Se pudieron formular preguntas a través del espacio Procomún

En la charla, a pesar del título, no se trató únicamente de datos  y sus procesos de análisis; ni de cómo se realizan  las comparaciones entre centros y  países
Los resultados que nos muestran los estudios posteriores a cada prueba

Se abordaron temas como  las relaciones entre metodologías y características de sistemas educativos y los resultados de las pruebas.
Incorporación de cuestionarios para el profesorado para dar luz a estas inquietudes.

¿Qué sistemas educativos tienen mejores resultados? Filandria, Corea y Japón. Por tanto contextos muy diferentes que hace imposible pensar en la imposición de un sistema educativo similar. Se trató el cambio educativo de Polonia tras los malos resultaos obtenidos en PISA 2000 que ahora están viendo rendimientos más positivos.

La realidad es que es necesario un cambio metodológico basado en competencias y realidad, sobre contenidos y memoria. Pero no se trataría de una sustitución, sino de una convivencia.  Necesario el cambio de mentalidad de profesorado y  la implicación de la familia.

En muchos momentos de la charla se trató el tema PISA, poniendo en solfa que no evalúa centros ni alumnado concreto, pues realizan una pequeña parte  de la prueba. Se evalúa la comunidad autónoma en el caso español.

Fue muy interesante conocer que tanto aplicadores como correctores reciben una formación previa. Se habló de su elevado coste.

Se trató también las pruebas externas que traerá la LOMCE, concluyendo que tendrán el mismo espíritu de las pruebas TIMSS y PIRLS. Contarán con cuadernillos de contexto






Unidad 5. Actividad 2: Charla 1: Procesos de evaluación. Más allá de las preguntas

No pude seguir en directo la charla de expertos del INEE del día 3 de diciembre. Así que acudí al vídeo que después se subió.



Los expertos participantes fueron: David Cervera, J. Mª Sánchez, Joaquín Vera, Carmen Tobar Mª J. García, Lis Cercadillo.

Los participantes del curso pudieron realizar preguntas a través de la comunidad del MOOC en Procomún

En esta charla se trataron los siguientes temas, entre otros:
Difusión de la la utilidad de  los cuestionarios de contexto entre la población.
Importancia de la perseverancia o motivación del estudiante en las pruebas y resultados de PISA.
Información individual a las familias de los alumnos que han realizado las pruebas.
Difusión de las evaluaciones externas.
Participación de alumnos y grupos de alumnos en PISA.
Utilidad de PISA, TIMMS Y PIRLS en el aula.
Se contestaron las siguientes preguntas:
¿Es cierto que muchos centros preparan a sus alumnos para estas pruebas?
¿Cuáles son las ventajas pedagógicas que han aportado al docente la aplicación de pruebas internacionales?
¿Por qué no participan todas las CCAA, por ejemplo Castilla-la Mancha?
¿Cómo debe actuar el profesorado ante este tipo de evaluaciones?

Algunas ideas interesantes:

Sobre la muestra de  centros  y  alumnado
-Los distintos países proporciona su propio marco muestral (centros, grupos y alumnado).
- En España las CC. AA.  Y los centros (públicos, privados y concertados) son los estratos en los que se dividen  de las pruebas.
- OCDE o IEA seleccionan los centros.
- ¿Cómo se eligen al alumnado?: aleatoriamente entre alumnado de cierta edad (PISA), en grupos completos (TIMSS y PIRLS).
- A los centros se le comunica en el mismo días. Si se niega se realiza en otro centro suplente
Posibilidad de maquillar resultados al ser el país el que proporciona la muestra.
En  2015 las pruebas PISA pasarán a ser la representación de una muestra nacional
Sobre los cuestionarios de contexto:
- Las distintas pruebas miden también aspectos de contextos. Estos se publican en las páginas del INEE y en las de la OCDE
- Las conclusiones vienen de manos del propio alumnado, directores, tutores y familias
- ¿Qué información nos proporcionan?: nivel socioeconómico, cultural, motivación del alumnado…
Acerca de las pruebas
- El alumnado no se ve implicado en las pruebas, pues no la entienden como condicionante de su propia evaluación. No está acostumbrado a este tipo de preguntas ni a esta variable temporal.
- Al ser realizada la prueba por distintos grupos de  estudiantes, no hay resultados de alumnos sino globales de la propia CA
- Existen dos tipos de pruebas (una más fácil y otra estándar) utilizada por la OCDE para animar a países a participar.
- Difícil preparar las pruebas por las grandes variables que cuentan.
- Castilla la Mancha, si participará en 2015


Los participantes de la charla abogan por un cambio metodológico, trabajar competencias cercanas a la realidad sobre contenidos.  También se habla de la parcialidad de competencias trabajadas. Parece que la OCDE hace hincapié en las que están relacionadas con el ámbito económico