Resultados esperados de aprendizaje Pensamiento crítico. Evaluación. Valor añadido.
Estos son términos que, tal vez tan recientemente como a principios de los 2000, habrían estado en la mente de relativamente pocos administradores de universidades y facultades. Ahora, sin embargo, dichos términos son un aspecto inevitable de la vida para un número cada vez mayor de personas que enseñan -y quienes son responsables de garantizar la calidad de la enseñanza- dentro de la educación superior estadounidense.
Asumiendo que otras universidades son como aquella en la que enseño, los instructores de prácticamente todos los cursos deben recopilar e informar datos de evaluación de algún tipo, con respecto a la medida en que los estudiantes cumplen objetivos de aprendizaje específicos especificados en los planes de estudio. Las evaluaciones, que deben ir más allá de las calificaciones de letras de los estudiantes en el curso, pueden incluir tareas escritas, preguntas de exámenes, grupos focales o encuestas, cualquier cosa que cuantifique la medida en que los estudiantes logran las metas de aprendizaje del curso. Múltiples modos de evaluación se consideran mejores que los singulares.
El movimiento hacia la evaluación, cuantificación y documentación del aprendizaje de los estudiantes, impulsado por agencias de acreditación regionales que tienen el poder de otorgar o denegar leyes de salud limpias a las universidades, es parte de un marco de rendición de cuentas más amplio que impregna la sociedad estadounidense. Los entrenadores deportivos no solo son juzgados en sus registros de victorias / derrotas y personalidades de televisión, en sus clasificaciones de audiencia. Hoy en día, uno no puede permanecer en un hotel, volar en una aerolínea, comer en un restaurante o cortarse el pelo (al menos de franquicias nacionales), sin que se le solicite completar una encuesta en línea, cuyos resultados presumiblemente serán utilizados. por la gerencia para evaluar al (los) empleado (s) con quien interactuó.
En la medida en que los sistemas de rendición de cuentas realmente mejoren la calidad de los servicios prestados, deberían ser bienvenidos. Sin embargo, muchos miembros de la facultad -detectados de que las evaluaciones realmente evalúen el aprendizaje de los estudiantes, frustrados por tener otra tarea que haga reclamos sobre su tiempo y / o preocupados por la intrusión administrativa en la forma en que imparten sus clases- parecen poco entusiastas sobre el movimiento de evaluación. David Glenn, escribiendo en la Crónica de la Educación Superior, ha producido varios artículos sobre evaluación y rendición de cuentas. Este en particular captura el sabor del debate.
La contribución más reciente al debate proviene de los sociólogos educativos Richard Arum y Josipa Roksa, a través de su nuevo libro Academically Adrift: Limited Learning in College Campuses . Arum y Roksa informan los resultados de un estudio nacional longitudinal de 2.362 estudiantes universitarios de primer año ingresados en 24 instituciones, que completaron, entre otras medidas, la Evaluación de Aprendizaje Universitario (CLA) durante el semestre de otoño de 2005 de sus escuelas y en un segundo año consecutivo -up en la primavera de 2007. Los autores reconocen que los "procedimientos nacionales de muestreo de probabilidad" no se siguieron en toda su extensión, pero muestran que los datos demográficos de la muestra del estudio se asemejan a los de otras bases de datos de matrículas universitarias de EE. UU.
¿Que es el CLA? Arum y Roksa señalan en repetidas ocasiones que su objetivo es evaluar "el pensamiento crítico, el razonamiento complejo y la escritura", en oposición al conocimiento específico del curso. Los autores se centran en la "tarea de rendimiento" CLA, describiéndola como una actividad de escritura administrada por computadora de 90 minutos, en la cual los estudiantes responden a hipotéticos escenarios de decisión del mundo real. Los estudiantes reciben materiales complementarios tales como artículos de periódicos, estadísticas y memorandos relacionados con el escenario. Según el libro, el CLA pretende medir:
… qué tan bien el alumno evalúa la calidad y relevancia de la evidencia, analiza y sintetiza datos e información, saca conclusiones de su análisis y considera perspectivas alternativas (p.22).
Los hallazgos clave con respecto al cambio en el rendimiento CLA del estudiante del primer al segundo año de la universidad incluyen:
(Una de las reservas comunes que los analistas de datos tienen sobre el estudio del cambio a lo largo del tiempo en los puntajes de resultados es "efectos límite" [es decir, algunos participantes puntúan tan alto en la primera evaluación, no hay espacio para mejorar en la segunda evaluación]. La mayoría de las universidades de élite que tienen esta preocupación. El hallazgo anteriormente citado sobre cómo los estudiantes cerca de la cima aún mejoraron y los análisis adicionales presentados en las páginas 153-154 del libro parecen disipar las preocupaciones sobre los efectos de techo.
Los autores también analizaron aspectos de la experiencia educativa que se correlacionaron con el rendimiento del CLA de segundo año, más allá de lo que se esperaría del rendimiento del primer año de los estudiantes. Tomando prestado de la economía, dicho enfoque se dice que captura el beneficio de valor agregado de haber asistido a una universidad. Los ejemplos de hallazgos fueron que tomar cursos que requieren extensas tareas de lectura y escritura se asoció con aumentos en los puntajes CLA de segundo año, mientras que las horas dedicadas a estudiar con pares presagiaron disminuciones en dichos puntajes (ver la Tabla A4.5 del libro).
En su conclusión, Arum y Roksa advierten contra los "esquemas de rendición de cuentas de alto riesgo" que implementan el CLA y los instrumentos relacionados, lo que posiblemente podría implicar criterios absolutos de desempeño y sanciones obligatorias para el personal de instrucción y supervisión cuando los estudiantes no llegan a ellos. Como argumentan:
… simplemente no estamos en una etapa de conocimiento científico donde los resultados de aprendizaje de los estudiantes universitarios se puedan medir con la suficiente precisión como para justificar la adopción de un sistema de responsabilidad coercitivo sin reservas significativas (p.141).
Un artículo reciente sobre evaluación escrito por el Provost y Vice Provost para Planificación y Evaluación en mi universidad de origen, Texas Tech, está disponible aquí. Estos funcionarios discuten el CLA y otras herramientas posibles para medir el rendimiento estudiantil, con un enfoque en las soluciones que consideran mejores para Texas Tech.
Un triste adiós a un colega: la Academia perdió a un profesor e investigador apasionado cuando mi colega de Texas Tech, Sarah Kulkofsky, falleció el 13 de enero de 2011 a la edad de 30 años. El mencionado libro, Académicamente a la deriva , concluyó invitando a los que están en la educación superior a inculcar un "amor para toda la vida del aprendizaje" en sus estudiantes. Como los testimonios de los estudiantes y colegas de Sarah sobre su muerte dejaron en claro, Sarah había tenido un éxito espectacular en esta área.