viernes, 18 de abril de 2008

Análisis de las interrogantes del esquema 18/04/08

CENTRO DE ENSEÑANZA DE LENGUAS EXTRANJERAS
MACRO-PROYECTO DE EVALUACIÓN
ACTA 46ª REUNIÓN 18 de abril de 2008 de 10:00 a 12:00 horas

Asistentes:
Coordinadora: Paola Suárez
Depto de Alemán: Diana Hirschfeld y Laura Velasco
Depto. de Francés: Nicole Trocherie y Sergio García
Depto. de Inglés: Pablo Peñaloza, Shelley Chapman, Harold Ormsby y Adriana Alcalá (Roxana Hernández justificó)
Depto. de Italiano: Giovanna Hernández, Juan Porras, Consuelo Aguirre y Patricia Ángeles (oyente)
Depto. de Portugués: Patricia Navarrete, Noemí Alfaro y Jane Gonzaga

1. Asuntos tratados:
> El equipo trabajó en el análisis de cada una de las dimensiones del esquema. Los responsables de cada interrogante presentaron una ampliación a los términos que aparecen después de cada pregunta. El primer equipo que presentó explicó los siguientes términos:

Conceptos relevantes del rubro ¿Qué evaluamos?
El saber ser se refiere a las actitudes, a la automotivación, a la iniciativa y el trabajo en equipo.
El saber hacer se relaciona con el desempeño basado en procedimientos y estrategias.
El saber conocer se relaciona con procesos como observar, explicar, comprender y analizar.

Se apoyaron en el siguiente autor:
Tobón, S. (2006). Formación basada en competencias. Pensamiento complejo, diseño curricular y didáctica. Bogotá: ECOE, cap. 3.

La integración de saberes es la autorregulación del alumno sobre el proceso de aprendizaje, es decir, la autogestión de actitudes, motivaciones, estrategias y habilidades (cognitivas y metacognitivas).

Las actividades significativas son aquellas cuyo resultado de aprendizaje queda en la memoria estable (a largo plazo). (Balboni, P., 2002).

La diversidad cognitiva alude a los diferentes estilos de aprendizaje, es decir, a la forma particular en que cada aprendiente adquiere conocimientos.

Conceptos relevantes en el rubro ¿Cuándo evaluamos?
El proceso de enseñanza/aprendizaje es aquel en el que estudiante y profesor son corresponsables en el establecimiento de metas de aprendizaje y el modo de alcanzarlas.

> Los rubros ¿Cómo evaluamos? y ¿Con referencia a qué evaluamos? se fusionaron y el resultado fue el siguiente:

¿Cómo evaluamos?
Aspiramos a una evaluación criterial que resulte del uso de referentes previamente establecidos a partir de los cuales podrán valorarse las evidencias de aprendizaje.

Acuerdos:
> El viernes 25 de abril sesionaremos desde las 10 hasta las 14:00hrs. Las primeras dos horas estaremos en el salón 102-A presentando avances del análsis de cada "burbuja", pues ahora deberán desarrollarse ejemplos y actividades o interrogantes de reflexión para los destinatarios del esquema; además intercambiaremos preguntas sobre el proceso de establecimiento de criterios para plantearlas posteriormente en la charla que dará el Dr. Tiburcio Moreno de la Universidad Autónoma de Hidalgo invitado por el programa de Formación de Profesores de 12 a 14:00 hrs.

> La sesión del 2 de mayo quedará disculpada.


Redactó Paola Suárez.

viernes, 11 de abril de 2008

Los criterios de evaluación

CENTRO DE ENSEÑANZA DE LENGUAS EXTRANJERAS
MACRO-PROYECTO DE EVALUACIÓN
ACTA 45ª REUNIÓN 11 de abril de 2008 de 10:00 a 12:00 horas

Asistentes:
Coordinadora: Paola Suárez
Depto de Alemán: Diana Hirschfeld y Laura Velasco
Depto. de lenguas Asiáticas: Kasuko Nagao (justificó)
Depto. de Francés: Nicole Trocherie y Sergio García
Depto. de Inglés: Pablo Peñaloza, Shelley Chapman, Luis Cabrera, Harold Ormsby y Adriana Alcalá
Depto. de Italiano: Giovanna Hernández, Juan Porras y Consuelo Aguirre
Depto. de Portugués: Patricia Navarrete, Noemí Alfaro y Jane Gonzaga

1. Asuntos tratados:
> El equipo trabajó en la revisión del esquema de criterios de evaluación. El borrador preliminar quedó de la siguiente manera:

¿Para qué evaluamos?
Evaluamos para mejorar: Aspiramos a una evaluación formativa y ética, que beneficie a evaluados y evaluadores; las evidencias generadas deben permitir la retroalimentación a fin de reorientar el proceso de enseñanza/aprendizaje y facilitar la toma de decisiones justas.

¿Con qué evaluamos?
Evaluamos integrando recursos tanto cualitativos como cuantitativos tales como portafolios, rúbricas, pruebas, listas de cotejo, proyectos y diarios de clase entre otros.

¿Qué evaluamos?
Evaluamos la integración de distintos saberes sobre las lenguas extranjeras. Aspiramos a una evaluación que integre el saber hacer, el saber ser y el saber conocer; que esté conformada por actividades significativas que respeten la diversidad cognitiva y sociocultural de los alumnos.

¿Cuándo evaluamos?
Evaluamos de manera permanente. Aspiramos a una evaluación que acompañe el proceso de enseñanza/aprendizaje, es decir, la evaluación no debe ser una fase final ni marginal de la enseñanza sino un elemento curricular inherente al proceso.

¿Quiénes evaluamos?
Queremos una evaluación que tome en cuenta el punto de vista de los involucrados en el proceso de enseñanza/aprendizaje, así que ha de incluir las modalidades coevaluación, heteroevaluación y autoevaluación.

¿Cómo evaluamos?
Aspiramos a una evaluación criterial, que no resulte de la comparación de los alumnos entre si sino de uso de referentes previamente establecidos a partir de los cuales podrán valorarse las actuaciones de los alumnos.

¿Con referencia a qué evaluamos?
Queremos criterios de evaluación que hayan sido determinados colectivamente siempre en función de la mejora del proceso enseñanza / aprendizaje. Los juicios emitidos deberán ser siempre descriptivos y transparentes.

Acuerdos: se formaron equipos para ahondar en cada interrogante con la ayuda de bibliografía especializada. Los equipos quedaron de la siguiente manera:

Nicole y Diana
¿Con qué evaluamos?

Adriana y Jane
¿Para qué evaluamos?

Laura y Paty
¿Quiénes evaluamos?

Pablo y Shelley
¿Cómo evaluamos?

Sergio y Luis
¿Con referencia a qué evaluamos?

Consuelo, Giovanna y Juan
¿Cuándo evaluamos?
¿Qué evaluamos?

> La siguiente sesión los participantes deberán traer una definición de los términos especializados que aparecen en el párrafo que se les asignó.

Redactó Paola Suárez.

viernes, 4 de abril de 2008

Sobre validez y confiabilidad

CENTRO DE ENSEÑANZA DE LENGUAS EXTRANJERAS
MACRO-PROYECTO DE EVALUACIÓN
ACTA 44ª REUNIÓN 04 de abril de 2008 de 10:00 a 12:00 horas

Asistentes:

Coordinadora: Paola Suárez
Depto de Alemán: Diana Hirschfeld y Laura Velasco
Depto. de lenguas Asiáticas: Kasuko Nagao (justificó)
Depto. de Francés: Nicole Trocherie
Depto. de Inglés: Pablo Peñaloza, Shelley Chapman, Roxana Hernández y Adriana Alcalá
Depto. de Italiano: Giovanna Hernández, Juan Porras y Adriana Tovar
Depto. de Portugués: Patricia Navarrete, Noemí Alfaro y Jane Gonzaga

1. Asuntos tratados:

> El equipo trabajó en la resolución de las siguientes 3 preguntas


  • ¿Qué relación existe entre la emisión de juicios y los criterios de evaluación?
  • ¿Cómo se relaciona la validez y la confiabilidad con los criterios de evaluación?
  • ¿Cuáles son los diferentes pasos para el establecimiento de criterios?

Al respecto se comentó lo siguiente:

La emisión de juicios es un acto cotidiano, pero en el contexto escolar requiere de ciertos "prerrequisitos", de reglas, de referentes a partir de los cuales el juicio pueda ser considerado justo. Tales referentes son los criterios de evaluación. En el aula se emiten juicios todo el tiempo, pero idealmente sólo aquellos que han resultado de un proceso colegiado, transparente y anunciado pueden ser considerados éticos y sólo éstos deberían ser suceptibles de formalizarse.

La validez y la confiabilidad son consideradas intrínsecas a la evaluación y, por ende, al establecimiento de criterios, sólo que estos dos términos cobran perspectivas muy diferentes si se les ve desde una plataforma cualitativa o desde un enfoque cuantitativo. En cierto sentido, estos dos términos son "los criterios de los criterios".

En la evaluación cualitativa los objetivos o propósitos de los criterios buscan evaluar el proceso y no el producto. Para algunos se puede tener confiabilidad y validez dentro de la evaluación formativa si el juicio se sustenta en dos o más muestras, si la tarea está especificada sin ambigüedad y con precisión y si el evaluador es estable y consistente en los juicios que emite. Otros autores no consideran estos "criterios" viables ni deseables por el hecho de que están basados en una epistemología positivista no acorde con la función formativa de la evaluación.

Debido a que los criterios de evaluación dependen de varios factores es necesario que sean determinados colegiadamente. He aquí algunas ideas:

1) Hay que esclarescer los propósitos tanto de la educación como de la evaluación y llegar a un acuerdo en relación a nuestra concepción de la enseñanza y el aprendizaje.

2) Tanto los criterios como la evaluación están inmersos en una metodología y ésta, a su vez, en una teoría del aprendizaje de lenguas extranjeras. Por lo tanto, habrá que determinar la metodología y la teoría que sorportará los criterios.

3) Se requiere un análisis de las necesidades de los alumnos para saber a dónde queremos llegar o qué queremos que sepan hacer.

4) Ya que tengamos una meta ideal, hay que considerar cuánto tiempo debemos invertir para lograrla y cómo vamos a distribuir el tiempo entre las actividades necesarias. El peso de las actividades estará determinado por la teoría y metodología que se hayan adoptado.

Redactó: Paola Suárez

jueves, 3 de abril de 2008

Comentario a la Lectura de Sánchez Moguel

¿Cómo se relacionan la confiabilidad y la validez con los criterios de evaluación?

en: SÁNCHEZ Moguel (2005), "Criterios de la evaluación educativa: bases y perspectivas" en Avance y perspectiva. Órgano de difusión del Centro de Investigación y de Estudios Avanzados del I.P.N., vol. 24, núm. 1.

Sánchez Moguel distingue en su texto criterios de aplicación, técnicos, cualitativos y criterios sociales. La validez concierne a los criterios cualitativos.

La confiabilidad se refiere a la estabilidad del instrumento a través del tiempo y de las muestras, pero como las condiciones y cualidades en la educación son dinámicas, esa definición no es útil. Otra aproximación se refiere a que la medición sea libre de error, lo cual tampoco es alcanzable en el campo de las ciencias sociales. La tercer tercera definición parece más viable: “considerar semejante lo que es semejante y diferente a lo que lo es, lo cual acerca la noción cuantitativa de confiabilidad a la noción cualitativa de imparcialidad.”

La validez es, según la APA, la consideración más importante en la evaluación por medio de pruebas. La definición básica de la validez en instrumentos de de evaluación indica que éstos son válidos cuando miden lo que pretenden medir. Sin embargo, Aragón aclara: “lo que se valida no es el instrumento, sino la interpretación de los datos obtenidos por medio de un procedimiento especificado.” Parecido afirma Messick: “la validez depende de la ‘adecuación y pertinencia de inferencias y acciones’ basadas en los resultados de la evaluación”.

Como conclusión resulta que no existen criterios ni formulas universales para llevar a cabo las tareas evaluativas, ni deben existir. Cada sociedad escolar debe definir los suyos propios. “Las interpretaciones válidas del significado y la verdad son hechas por gente que comparte decisiones y las consecuencias de las decisiones, escribe Steinar Kvale.


Diana Hirschfeld

Diferencias entre criterios, indicadores y estándares

CENTRO DE ENSEÑANZA DE LENGUAS EXTRANJERAS
MACRO-PROYECTO DE EVALUACIÓN
ACTA 43ª REUNIÓN 28 de marzo de 2008 de 10:00 a 12:00 horas

Asistentes:
Coordinadora: Paola Suárez
Depto de Alemán: Diana Hirschfeld y Laura Velasco
Depto. de lenguas Asiáticas: Kasuko Nagao (justificó)
Depto. de Francés: Nicole Trocherie
Depto. de Inglés: Pablo Peñaloza, Shelley Chapman, Roxana Hernández y Adriana Alcalá
Depto. de Italiano: Giovanna Hernández, Juan Porras y Consuelo Aguirre
Depto. de Portugués: Patricia Navarrete, Noemí Alfaro y Arturo Salinas

1. Asuntos tratados:
> El equipo trabajó en la resolución de las siguientes 2 preguntas
  • ¿Cuál es la diferencia entre criterios, indicadores y estándares?
  • ¿Qué relación tienen los criterios con las funciones de la evaluación?

Al respecto, se comentó lo siguiente:

"Los criterios son opciones para juzgar al objeto de evaluación, a sus diferentes aspectos de su calidad, como por ejemplo su proceso, las estrategias así como los objetivos que "el objeto" de evaluación (el alumno) intenta alcanzar. Nos sirven para evitar una valoración global (no descriptiva). Deben ser determinados dentro del contexto específico de ese objeto y de la función de la evaluación" (Nevo, 1997:37).

"Los indicadores son las evidencias de la práctica que nos pueden señalar el sentido y alcance (en la práctica) de un criterio. No es sino reflexionar sobre las posibilidades y limitaciones de un criterio" (Salinas, 2002:63).

"Los estándares son niveles de realización aceptable o no aceptable para cada uno de los criterios. Reflejan la magnitud de la diferencia con el referente (la cual es suficientemente significativa para emitir un juicio positivo" (Cabrera,2003:33).

Es decir:

"Los criterios son la compilación de información que permite juzgar el éxito que se ha logrado alcanzar en los objetivos, metas o estrategias de aprendizaje que se habían previamente establecido para el proceso de evaluación.

En cambio, los indicadores son evidencias que ponen de manifiesto los criterios que se han seleccionado para decidir qué tipo de información se debe emplear.

Los estándares delimitan el grado de éxito que se ha conseguido durante el proceso de enseñanza/aprendizaje, según el tipo de evaluación que se pretenda utilizar, absoluta, relativa o de proceso" (Cabrera, 2003:15-36).

Otro colega explica la diferencia así:

"Los criterios establecen el juicio de valor sobre la actuación. Los indicadores son la evidencia sobre la cual se realizará el juicio de valor y los estándares son los diferentes grados en los que se puede elaborar dicho juicio."

Sobre la segunda pregunta se comentó lo siguiente:

"Si entendemos que el sistema de evaluación es una parte consustancial del sistema de enseñanza, la relación entre las funciones y los criterios debe ser coherente con los objetivos de la evaluación, a fin de que ésta sea un refente para el alumno y lo retroalimente para buscar la mejoría en su proceso de aprendizaje a diferentes niveles."

Redactó: Paola Suárez

Preguntas sobre criterios, indicadores y estándares

CENTRO DE ENSEÑANZA DE LENGUAS EXTRANJERAS
MACRO-PROYECTO DE EVALUACIÓN
ACTA 42ª REUNIÓN 14 de marzo de 2008 de 10:00 a 12:00 horas


Asistentes:
Coordinadora: Paola Suárez
Depto de Alemán: Diana Hirschfeld y Laura Velasco
Depto. de lenguas Asiáticas: Kasuko Nagao
Depto. de Francés: Nicole Trocherie
Depto. de Inglés: Pablo Peñaloza, Shelley Chapman, Roxana Hernández y Adriana Alcalá
Depto. de Italiano: Giovanna Hernández (Juan Porras y Consuelo Aguirre justificaron)
Depto. de Portugués: Patricia Navarrete, Noemí Alfaro y Arturo Salinas

1. Asuntos tratados:
> El equipo planteó las siguientes preguntas sobre los conceptos de criterios, indicadores y estándares:

¿Cuál es la diferencia entre criterios, indicadores y estándares?
¿Qué relación tienen los criterios con las funciones de la evaluación?
¿Qué relación existe entre la emisión de juicios y los criterios de evaluación?
¿Cómo se relaciona la validez y la confiabilidad con los criterios de evaluación?
¿Cuáles son los diferentes pasos para el establecimiento de criterios?

> Los colegas trabajaron en pares para responder las preguntas planteadas (no de manera conclusiva, sino crítica).
> En plenaria se comentaron las preguntas.

2. Acuerdos:
> La siguiente sesión continuaremos la discusión sobre los criterios, indicadores y estándares.
> A fin de apoyar el trabajo de reflexión se revisarán las siguientes lecturas:



  • ÁLVAREZ Méndez, Juan Manuel (2003). La evaluación a examen – Ensayos críticos, Madrid: Miño y Dávila Editores.
  • BARBERÀ Gregori, Elena (1999). Evaluación de la enseñanza, evaluación del aprendizaje. Barcelona: Edebé.
  • SALINAS, Dino (2002). ¡Mañana examen! La evaluación: entre la teoría y la realidad, Barcelona: Graó.
  • SANTOS Guerra, Miguel A. (1995). La evaluación: un proceso de diálogo, comprensión y mejora. Granada: Aljibe.
  • SÁNCHEZ Moguel (2005), "Criterios de la evaluación educativa: bases y perspectivas" en Avance y perspectiva. Órgano de difusión del Centro de Investigación y de Estudios Avanzados del I.P.N., vol. 24, núm. 1.
  • CABRERA. F. (2003), Evaluación de la formación, Madrid: Síntesis.
  • NEVO, David (1997), Evaluación basada en el centro. Un diálogo para la mejora educativa, Bilbao: El Mensajero.


Redactó: Paola Suárez

Segunda sesión sobre rúbricas

CENTRO DE ENSEÑANZA DE LENGUAS EXTRANJERAS
MACRO-PROYECTO DE EVALUACIÓN
ACTA 41ª REUNIÓN 07 de marzo de 2008 de 10:00 a 12:00 horas


Asistentes:
Coordinadora: Paola Suárez
Depto de Alemán: Diana Hirschfeld
Depto. de Francés: Nicole Trocherie y Sergio Palacios
Depto. de Inglés: Pablo Peñaloza, Shelley Chapman, Roxana Hernández y Adriana Alcalá
Depto. de Italiano: Giovanna Hernández, Adriana Tovar, Juan Porras y Consuelo Aguirre
Depto. de Portugués: Noemí Alfaro y Arturo Salinas (Patricia Navarrete justificó)

1. Asuntos tratados: Continuamos con la reflexión sobre rúbricas a partir de las preguntas planteadas en la sesión anterior.

2. Acuerdos:
> La siguiente sesión revisaremos la lectura SALINAS, Dino (2002) ¡Mañana examen! La evaluación: entre la teoría y la realidad, Barcelona: Graó (sólo el capítulo 3) continúa pendiente.

Redactó: Paola Suárez