June 23rd - the quality of evaluation programmes

Yesterday we dealt with the quality of evaluation programmes, according to Alicia Camilloni. In your set of notes you have another chapter related to the same topic: Collecting Information (from Genesee and Upshur (1996) Classromm-Based Evaluation in Second Language Education). Reading this chapter will help with the jargon in English (which you were worried about!).
There's no absolute agreement between Camilloni and these authors, especially on the fact that realibility is not an essential condition for validity. Remember Camilloni states that when tests have high content validity, the tasks proposed are meaningful to students and they promote the construction of knowledge, the level of reliability decreases. Genesee and Upshur, on the contrary, postulate a one-to-one relationship between validity and reliability (see p. 63).
You can read this chapter and comment on your impressions here.

Observations - more groups

Chicas, también pueden incluir en sus observaciones participativas a tres grupos de Alicana que están compuestos por alumnos becados por la embajada de Estados Unidos, a través de un programa que se llama ACCESS. Los chicos y chicas son alumnos de escuelas públicas que sin esta beca no podrían acceder a un curso de esta naturaleza.
Los horarios son:

• Martes y Jueves de 8.00 a 10.00 hs - Prof. Silvana Bobbio - a partir del 22/06 - silvanabobbio@hotmail.com
• Lunes y Miércoles de 16.00 a 18.00 - Prof. Magalí Malizia - a partir del 22/06 - magalimalizia@hotmail.com
• Martes y Jueves de 10.30 a 12.30 - Prof. Lucila Pane - a partir del 15/06 - lucipane@gmail.com

Los dos primeros grupos tienen su clase en Alicana, San Martín 2293, mientras que el tercer grupo tiene su clase en la EET 324 de Monte Vera.

Guidelines for observing, collaborating and collecting data

• Visit the class at least twice or three times (depending on availability – the more time you spend in the classroom, the better).
• On your first visit, focus on aspects such as the number of students, the materials, and the contents. The teacher will ask you to help if she needs assistance when monitoring students or checking class work.
• On your second visit, you can take a more active role and take the lead during a stage of the lesson, if the teacher agrees. See how the contents are presented and dealt with (with an emphasis on communication or on form, on recognition or on production, etc.). Pay attention to students’ participation and the types of interactions that dominate the lesson (teacher-whole group, student-student, etc).
• If there’s third visit, you can again be in charge of a part of the lesson. Also, try to “interview” the teacher and learn about her own beliefs and policies as regards evaluation, and the institution requirements and regulations on the same topic.
• It’s important that you also interact with students, so that you get to know them well and can prepare an evaluation proposal that is situated and contextualized.

La Evaluación Alternativa - Task

Here are some extracts from "De técnicas y recursos de evaluación: la importancia (relativa) de los métodos", by Alvarez Mendez (2001). The task is to find connections between these ideas and the ones presented by Anijovich. Try to find agreements, contradictions and areas that still need to be illuminated. It's not necessary that you discuss all the extracts.

1. (…) el profesor debe estar dispuesto a aprender de la evaluación que ejerce de y con sus alumnos.
2. El tiempo de clase, convertido en tiempo de aprendizaje facilitado, estimulado, ayudado, orientado por la enseñanza, debe convertirse en una oportunidad simultanea de evaluación.
3. (…) quienes aprenden no solo deben dar respuestas a preguntas ya dadas, y de las que se espera una única y cerrada respuesta, sino que también deben explicar su pensamiento y los argumentos en los que basan sus ideas. Formular preguntas es también otra forma de poner en práctica el conocimiento.
4. (…) en este nuevo contexto de entendimiento, podemos llegar por otros caminos a los valores que representan la validez y la fiabilidad matemática para la mentalidad positivista, no necesariamente estadísticos: debate, diálogo, discusión, negociación, consenso, deliberación, argumentación, credibilidad, confiabilidad, responsabilidad, razonamiento, siempre a la luz e impregnados e inspirados por una ética de la responsabilidad que requiere del ejercicio justo entre personas cabales. Ésta tiene en cuenta las consecuencias de las decisiones que a partir de ella se adopten. Y esto nos obliga a buscar otros conceptos, otras expresiones que recojan más fielmente el sentido y el significado de lo que pretendemos expresar.
5. El valor de la evaluación no está en el instrumento en sí sino en el uso que de él se haga. Más que le instrumento, importa el tipo de conocimiento que pone a prueba, el tipo de preguntas que se formulan, el tipo de cualidades (mentales o prácticas) que se exigen y las respuestas que se espera obtener según el contenido de las preguntas y los problemas que se formulan.
6. ACERCA DEL EXAMEN: (…) si de la información que aportan las respuestas que dan los alumnos a las preguntas de un examen el profesor puede obtener datos importantes para mejorar su propia enseñanza y (re)orientar y ayudar a los alumnos en su aprendizaje, el instrumento-examen puede desempeñar un papel educativamente constructivo en la formación del alumno. Si el examen solo sirve como instrumento para medir, sinónimo de calificar, la información transmitida que le alumno puede reproducir literalmente, el artefacto examen sirve para poco educativamente hablando.
7. ACERCAD DE LA OBSERVACION:Lo que importa en la observación utilizada con fines evaluativos es delimitar y dejar establecidos: sus campos, qué merece la pena ser observado, qué importancia se concede a los datos observados y qué papel pueden desempeñar aquí los sujetos observados (…) En cualquier caso necesitamos documentar este tipo de evaluación mediante diarios, anotaciones, que puedan ser registros documentados sobre los que se pueda dar información oportuna y conveniente para quien aprende. (…) La triangulación de recursos de evaluación y, sobre todo contar con los sujetos a quien está referida, garantizará más fielmente el actuar correcto y justo en estos casos.
8. ACERCA DE LA ENTREVISTA:(…) Es encuentro entre personas que la parten de la firme voluntad de entenderse desde el respeto más profundo. (…) Hay varias formas de entender la entrevista. Si algo las une es el empeño en el desarrollo y crecimiento del pensamiento crítico que exige argumentación. Pero también el contexto más amplio en el que se desarrolla y la significación que tiene para los sujetos, cómo viven y sienten su aprendizaje. Es la razón por la que no se puede achacar como defecto a la entrevista el carácter subjetivo de la información recogida, cuando éste es uno de los valores principales que la sustentan y que se acepta por ser tal: el encuentro entre sujetos dispuestos a entenderse.