e-Evaluación orientada al
e-Aprendizaje estratégico
en Educación Superior
Gregorio Rodríguez Gómez
María Soledad Ibarra Sáiz
(Edits.)
NARCEA, S.A. DE EDICIONES
© NARCEA, S.A. DE EDICIONES, 2018
Paseo Imperial, 53-55. 28005 Madrid. España
www.narceaediciones.es
ISBN papel: 978-84-277-1803-6
ISBN ePdf: 978-84-277-1879-1
ISBN ePub: 978-84-277-1235-5
Todos los derechos reservados
Queda prohibida, salvo excepción prevista en la ley, cualquier forma de reproducción, distribución, comunicación pública y transformación de esta obra sin contar con autorización de los titulares de propiedad intelectual. La infracción de los derechos mencionados puede ser constitutiva de delito contra la propiedad intelectual (arts. 270 y sgts. Código penal). El Centro Español de Derechos Reprográficos (www.cedro.es) vela por el respeto de los citados derechos.
Sobre enlaces a páginas web
Este libro puede incluir enlaces a sitios web gestionados por terceros y ajenos a NARCEA, S.A DE EDICIONES que se incluyen sólo con finalidad informativa. Las referencias se proporcionan en el estado en que se encuentran en el momento de la consulta de los autores, sin garantías ni responsabilidad alguna, expresas o implícitas, sobre la información que se proporcione en ellas.
Han participado en la elaboración de este libro:
Autores y editores:
RODRÍGUEZ GÓMEZ, Gregorio
Doctor en Ciencias de la Educación. Profesor Titular de Universidad de Métodos de Investigación en Educación de la Universidad de Cádiz. Coordinador del Máster Universitario en Orientación y Evaluación SocioEducativas. Coordinador del proyecto de excelencia Re-Evalúa (Reingeniería de la evaluación, tecnologías y desarrollo de competencias en profesores y estudiantes universitarios).
IBARRA SÁIZ, María Soledad
Doctora en Ciencias de la Educación. Profesora Titular de Universidad de Diagnóstico en Educación de la Universidad de Cádiz. Directora del Grupo de Investigación EVALfor (Evaluación en contextos formativos). Coordinadora del proyecto INevalCO (INnovación en la EVALuación de Competencias. Diseño y desarrollo de procedimientos e instrumentos para la evaluación de competencias en entornos de aprendizaje mixtos/virtuales con la participación de los estudiantes en los títulos de grado).
Autores y autoras:
CABEZA SÁNCHEZ, Daniel
Ingeniero Técnico en Informática. Investigador en el proyecto de excelencia Re-Evalúa (Reingeniería de la evaluación, tecnologías y desarrollo de competencias en profesores y estudiantes universitarios). Universidad de Cádiz.
CUBERO IBÁÑEZ, Jaione
Licenciada en Psicopedagogía y Máster en Orientación y Evaluación SocioEducativas. Investigadora en el proyecto INevalCO (INnovación en la EVALuación de Competencias. Diseño y desarrollo de procedimientos e instrumentos para la evaluación de competencias en entornos de aprendizaje mixtos/virtuales con la participación de los estudiantes en los títulos de grado). Universidad de Cádiz.
GALLEGO NOCHE, Beatriz
Doctora en Ciencias de la Educación. Profesora Ayudante Doctora de la Universidad de Cádiz en el área de Métodos de Investigación y Diagnóstico en Educación. Coordinadora del proyecto de innovación “e-Evaluación entre iguales en proyectos tutorados en el Campus Virtual: Cómo pasar de la retroalimentación a la e-proalimentación”.
GÓMEZ RUIZ, Miguel Ángel
Licenciado en Pedagogía y Máster en Psicología y Educación para el Desarrollo (Especialidad en Orientación y Evaluación Educativas). Becario FPDI del área de Métodos de Investigación y Diagnóstico en Educación de la Universidad de Cádiz. Desarrollando la tesis doctoral “Evaluación colaborativa de la e-Evaluación orientada al aprendizaje en estudios de grado”.
LEÓN RODRÍGUEZ, Álvaro Rafael
Ingeniero Técnico en Informática. Investigador en el proyecto EvalDOC (Evaluación pros-pectiva de las enseñanzas de doctorado: Propuesta de estrategias institucionales para el diseño, desarrollo y evaluación de la formación de investigadores). Universidad de Cádiz.
QUESADA SERRA, Victoria
Licenciada en Pedagogía y Máster en Orientación y Evaluación SocioEducativas. Investigadora en el proyecto de excelencia Re-Evalúa (Reingeniería de la evaluación, tecnolo gías y desarrollo de competencias en profesores y estudiantes universitarios). Universidad de Cádiz.
Índice
PRÓLOGO, Eduardo García Jiménez
PRESENTACIÓN, Gregorio Rodríguez Gómez y María Soledad Ibarra Sáiz
1. EL LARGO CAMINO HACIA LA e-EVALUACIÓN, ¿O HACIA LA u-EVALUACIÓN?, Gregorio Rodríguez Gómez y María Soledad Ibarra Sáiz
Hitos en el desarrollo de la evaluación del aprendizaje
El desarrollo de la evaluación
Paradigmas de la evaluación: evaluación como medición, como procedimiento, como indagación y como control de calidad
De la evaluación tradicional a la evaluación auténtica
De la evaluación a la e-Evaluación, ¿o a la u-Evaluación?
2. CARACTERIZACIÓN DE LA e-EVALUACIÓN ORIENTADA AL e-APRENDIZAJE, Miguel Ángel Gómez Ruiz, Gregorio Rodríguez Gómez y María Soledad Ibarra Sáiz
Construyendo la e-Evaluación Orientada al e-Aprendizaje (e-EOA)
Marco conceptual
Finalidades de la e-EOA
Actuaciones de la e-EOA
Estudiantes como evaluadores: la autoevaluación, la evaluación entre iguales y la coevaluación
Tareas de e-Evaluación como tareas de e-Aprendizaje
Retroalimentación y proalimentación
Resultado de la e-EOA
Contexto y participantes de la e-EOA
3. Los PROCEDIMIENTOS DE EVALUACIÓN, María Soledad Ibarra Sáiz y Gregorio Rodríguez Gómez
Introducción
Acreditación de competencias
Resultados de aprendizaje
Procedimiento de evaluación
Objeto de evaluación
Productos/actuaciones de aprendizaje
Tareas de evaluación
Criterios de evaluación
Medios, técnicas e instrumentos de evaluación
Elementos transversales al procedimiento de evaluación: proalimentación y participación
Sistema de calificación
Propuesta de un modelo de procedimiento de evaluación
4. OBJETOS, TAREAS Y CRITERIOS DE EVALUACIÓN, Gregorio Rodríguez Gómez y María Soledad Ibarra Sáiz
Objetos de evaluación
Tareas de evaluación
Criterios de evaluación
5. MEDIOS, TÉCNICAS E INSTRUMENTOS DE EVALUACIÓN, Beatriz Gallego Noche, Victoria Quesada Serra y Jaione Cubero Ibáñez
Conceptualización de medio, técnica e instrumento
Los medios de evaluación
Técnicas de evaluación
Observación
Encuestación: el cuestionario y la entrevista
Análisis de producciones y documentos
Funcionalidad
Instrumentos de evaluación
Tipos de instrumentos: lista de control, escala de valoración, rúbrica, diferencial semántico e instrumento mixto
Estructura de los instrumentos
Matriz de decisión
6. APLICACIONES Y HERRAMIENTAS PARA LA e-EVALUACIÓN, Daniel Cabeza Sánchez y Álvaro Rafael León Rodríguez
Herramientas
Rubistar
Usando Rubistar
The Rubric Builder
Usando The Rubric Builder
Evaluación en Moodle
Moodle-EvalCOMIX
ANEXO
Glosario: Medios de evaluación
BIBLIOGRAFÍA
FUENTES ELECTRÓNICAS
Prólogo
Internet está cambiando lo que aprenden los estudiantes y su forma de aprenderlo, al igual que lo hicieron otras tecnologías anteriores. Antes de Internet la escritura, y más tarde el libro, redujeron sensiblemente el valor de la tradición oral para que el estudiante conservara información compleja en su mente, y el valor del diálogo para simplificar el intercambio de información con sus profesores y compañeros; a cambio, hizo que el aprendizaje fuese una actividad más lógica, rigurosa y autosuficiente.
Más tarde la pizarra sacrificó las largas y en ocasiones bien elaboradas descripciones de objetos, lugares o procesos para permitir la representación gráfica y hacer posible el análisis de una idea escrita, compartida de forma simultánea por el profesor y por el conjunto de los estudiantes.
Y así, el uso de mapas, calculadoras, microscopios, ordenadores y otras tecnologías terminaron modificando el modo de aprender de los estudiantes y los contenidos de aprendizaje, amoldándolos a la forma y función de esas tecnologías.
Finalmente, en nuestros días, otras tecnologías como Internet con sus cualidades de interactividad, búsqueda inmediata, multimedia, hipervínculos, simultaneidad de tareas, etc., están relegando a un segundo plano la escritura a mano, la lectura comprensiva construida a partir de las connotaciones del texto (la información gracias a los hipervínculos y motores de búsqueda está cada vez más fragmentada) y el intercambio de información oral, modificando la razón de ser de las bibliotecas (que evolucionan hasta convertirse en centros de recursos de aprendizaje) y, lo que es más importante, alterando el modo de aprender de los estudiantes hasta hacerlo más superficial, menos reflexivo.
Internet ha convertido en ubicuo el aprendizaje de los estudiantes superando las limitaciones relativas al lugar y el momento en el que aprenden los estudiantes, con lo que espacio aula, el laboratorio e incluso el trabajo de campo están siendo ahora redefinidos para “acomodarlos” a la exigencia de la Red.
¿Puede permanecer inalterable la evaluación del aprendizaje cuando están cambiando sustancialmente la forma y el contenido de lo que se aprende? La respuesta que ofrece este libro deja entrever que es necesaria una rein-geniería de la evaluación del aprendizaje al uso en nuestras universidades.
Lo que esta obra recoge es que en, primer término, debe cambiarse la razón de ser de la propia evaluación, su estrategia: lo que se nos da a en-tender es que la evaluación en las modalidades de e-learning o b-learning será relevante, añadirá valor, en la medida en que se convierta en una oportunidad para que los estudiantes aprendan. La evaluación como recurso para determinar quiénes han alcanzado el estándar académico o para mejorar la enseñanza (una evaluación al servicio de los profesores) debe ponerse en cuestión en entornos de aprendizaje que intentan favorecer la autorregulación del aprendizaje por parte de los estudiantes.
En segundo término esta obra plantea la necesidad de redefinir el objeto mismo de evaluación. Puesto que el entorno de aprendizaje está modificándose, y como consecuencia los procesos desarrollados por los estudiantes para aprender y los propios resultados de aprendizaje, los centros de interés de la evaluación deben ser relegados a un segundo plano: hechos, principios, ideas, datos, habilidades o actitudes carecen de interés por sí mismos como objetos de evaluación.
En un medio como Internet que favorece el procesamiento rápido de la información y también la distracción, es mucho más interesante que la evaluación proporcione a los estudiantes la oportunidad para aprender a consolidar su atención sobre lo que leen, ven, escuchan o sienten, a asociar esos estímulos de manera significativa y sistemática a lo que ya conocen, transformarlos a fondo, profundamente, hasta integrarlos en sus memorias a largo plazo.
La autoevaluación, la evaluación entre iguales, la coevaluación y la evaluación realizada por el profesor deben ser reorientadas para que los estudiantes puedan recibir inputs que les permitan gobernar su forma de aprender y el contenido de lo que aprenden. La información que pueden recibir los estudiantes, sobre los procesos que realizan para aprender y sobre los resultados que consiguen, debe ayudarles a mejorar su atención, a gestionar mejor sus emociones y sentimientos, y a ser más reflexivos, profundos y empáticos.
El reto de la evaluación en un entorno de aprendizaje mixto o virtual es conseguir que los estudiantes reciban de profesores y compañeros –y también generen por ellos mismos–, un tipo de retroalimentación (feedback) y proalimentación (feedforward) que les resulte de utilidad para aprender.
La evaluación tiene un carácter instrumental, es un medio para el aprendizaje; proporciona información sobre la distancia que separa lo que el estudiante está aprendiendo de lo espera aprender. El valor y significado de ese diferencial es interpretado en este libro considerando la actividad que realiza el estudiante –las tareas de evaluación– y en términos de un conjunto de criterios de evaluación u objetivos de calidad.
Una modificación del enfoque y el objeto de evaluación llevan necesariamente a un cuestionamiento de las tareas que son objeto de evaluación y de los criterios utilizados habitualmente para evaluar el aprendizaje.
En entornos de aprendizaje virtuales o mixtos dentro del ámbito universitario, esta obra apuesta decididamente porque los estudiantes realicen tareas auténticas, es decir, tareas de evaluación que simulan los contextos (profesionales, personales, sociales, etc.) en los que se pone a prueba a aquellos que han completado sus estudios de grado, máster o doctorado.
No obstante, la introducción de tareas de evaluación auténticas en las que se evalúa la competencia de los estudiantes para utilizar todos los recursos que Internet (y los propios docentes y compañeros) ponen a su disposición, plantea un reto importante en términos del propio diseño de esos recursos.
En el mundo “no académico” los profesionales se enfrentan a tareas por las que son evaluados. Estas tareas presentan cierto grado de indefinición (a menudo deben ser redefinidas tras ser analizadas con un cliente o considerando el entorno en que deben realizarse) y están presididas por la inmediatez y sometidas a intereses económicos, científicos o políticos. Para que los estudiantes puedan afrontarlas con cierta garantía de éxito deberían contar con recursos de aprendizaje apropiados. Estamos hablando de un nuevo cambio que esta vez afecta al enfoque con el que se elaboran los propios “contenidos” a los que el estudiante accede en un entorno virtual o mixto.
La información que llega al estudiante y especialmente el conjunto de los recursos de aprendizaje elaborados por los profesores deberían estar diseñados para exigir al estudiante un mayor esfuerzo cognitivo; elaborar y favorecer la interacción con los estudiantes sobre la base de problemas, casos, hipótesis, preguntas, pistas, ésa debería ser la esencia de lo que enseñamos. Los profesores no deberíamos elaborar materiales que se limiten a presentar al estudiante información bien estructurada –en muchos casos, en Internet podemos encontrar a alguien que lo hace mejor que nosotros– en forma de lecciones “acabadas”, esquemas o mapas conceptuales. Nuestros materiales deberían contener menos orientaciones, ayudas o guías al estudiante y más invitaciones a que tomen conciencia de cómo y qué están aprendiendo.
Los contenidos de una enseñanza virtual o mixta deberían estar formados por materiales que exijan del estudiante resumir información, elaborar sus propias ideas, comparar y contrastar datos e informaciones diversas, cuestionar lo que leen, oyen o ven, contestar a preguntas, recrear emociones, construir percepciones, prestar atención, consolidar lo aprendido y fijarlo en la memoria.
En definitiva, el contenido de la enseñanza tendría que favorecer que los estudiantes piensen más por sí mismos –de otro modo Internet lo hará por ellos–, que especulen o anticipen soluciones. Es decir, que aprendan estratégicamente.
En el desarrollo de la evaluación en un entorno de aprendizaje virtual o mixto de estas características no son válidas buena parte de los medios, técnicas e instrumentos utilizados en la evaluación con lápiz y papel; éstos deben ser rediseñados o creados ex novo. Sencillamente no podemos evaluar tareas de evaluación auténticas utilizando pruebas objetivas de opción múltiple, listas de control o escalas de estimación. Estos instrumentos, apoyados en la experimentación o en la observación, desde luego no aportan información útil a los estudiantes para aprender, y la única contribución que hacen al profesor es acerca de qué saben o saben hacer aquéllos.
En este sentido, como hace esta obra, debe plantearse una revisión de los medios, técnicas e instrumentos habitualmente utilizados en la evaluación del aprendizaje considerando en qué medida resultan válidos en entornos de aprendizaje y tareas de evaluación diferentes a aquellos que fueron su origen.
Por último, necesitamos aplicaciones informáticas diseñadas ad hoc para afrontar los retos que supone introducir una evaluación de estas características. Algunas de las herramientas presentadas en esta obra, como RubiStar, The Rubric Builder o EvalCOMIX, son tentativas pioneras construidas utilizando los entornos virtuales disponibles con el objetivo de explorar nuevas posibilidades para la evaluación del aprendizaje.
Este libro e-Evaluación orientada al e-Aprendizaje estratégico en Educación Superior es una apuesta decidida por introducir un nuevo modo de pensar la evaluación de los aprendizajes en el ámbito de la educación superior, que pone en cuestión los usos de la evaluación tradicional en un entorno –el virtual o mixto– que le es ajeno, al tiempo que ofrece respuestas conceptuales e instrumentales para cambiar la práctica de la evaluación de modo que sea de utilidad en dicho entorno.
EDUARDO GARCÍA JIMÉNEZ
Universidad de Sevilla
Presentación
Las reformas que se vienen implantando en las universidades han posibilitado una mayor preocupación por parte del profesorado universitario a la hora de introducir cambios e innovaciones en su actividad docente. Pero si, en unos primeros momentos, la atención estaba focalizada en las “metodologías docentes”, de un tiempo a esta parte el foco se viene centrando en cómo abordar los procesos de evaluación desde posiciones innovadoras.
Además, el uso generalizado de las tecnologías en la actividad universitaria abre nuevas vías que suponen interesantes posibilidades para la incorporación de cambios e innovaciones en este terreno.
Así, no es de extrañar que sean numerosos los proyectos de investigación e innovación educativas, tanto nacionales como internacionales, que se centran de una forma específica en el desarrollo e implantación en la universidad de nuevos enfoques evaluativos.
En este sentido, desde el Grupo de investigación EVALfor (Evaluación en contextos formativos - http://www.uca.es/evalfor) del Plan Andaluz de Investigación, Innovación y Desarrollo (PAIDI) se vienen liderando una serie de proyectos de investigación o innovación educativas bajo el denominador común del análisis y mejora de las prácticas evaluativas en la enseñanza universitaria1.
Sobre la base del conocimiento y la experiencia adquirida en estos proyectos, en la actualidad venimos desarrollando el proyecto de excelencia Re-Evalúa2, en el que participan un total de 76 profesores universitarios, organizados en torno a grupos de investigación de 12 universidades españolas3.
En el contexto de este proyecto Re-Evalúa se ha elaborado este libro sobre la base de la experiencia y colaboración entre numerosos profesores universitarios preocupados por la mejora de su actividad evaluadora, así como del conocimiento adquirido en los proyectos mencionados.
Después de una primera elaboración de los capítulos que componen esta obra, éstos fueron sometidos a una validación de expertos, especialistas en Educación Universitaria de diferentes universidades españolas. Posteriormente, una vez introducidas las modificaciones que se consideraron pertinentes y adecuadas, se utilizó la nueva versión en diversos cursos de formación desarrollados en las correspondientes universidades participantes en el proyecto Re-Evalúa. A lo largo de ese proceso se volvieron a recibir nuevas aportaciones y comentarios por parte del profesorado universitario participante en las actividades formativas.
Por último, incorporadas dichas aportaciones, se elaboró el texto que ahora el lector tiene en sus manos, estructurado en tres partes fundamentales.
En una primera parte, constituida por los capítulos 1 y 2, los autores nos presentan una breve introducción a los avances que se han producido en el campo de la evaluación del aprendizaje en la universidad y nos introducen el marco teórico sobre el que se fundamenta toda la obra: e-Evaluación orientada al e-Aprendizaje estratégico.
Una segunda parte del texto, centrada en la sistematización de la evaluación, está constituida por los cuatro capítulos siguientes. En el capítulo 3 se presenta una forma de sistematizar el proceso de evaluación en la universidad. Partiendo de los resultados de aprendizaje que se quieren al canzar y las competencias a desarrollar, se presentan cada uno de los elementos esenciales que pueden contemplarse en un procedimiento de evaluación: objeto, productos/actuaciones, tareas, criterios, medios, técnicas e instrumentos de evaluación. Los capítulos 4 y 5 se dedican a describir cada uno de estos elementos de una forma más pormenorizada y ejemplificada. Finaliza esta parte con el capítulo dedicado al “cuaderno del evaluador”, un recurso que pretende orientar al profesorado universitario en el diseño de sus procedimientos de evaluación.
La tercera parte, se organiza en torno a las tecnologías y recursos para la e-Evaluación y se realiza una breve presentación de una selección de aplicaciones y herramientas informáticas que en la actualidad pueden ser utilizadas en los procesos de evaluación. Se hace una mención especial al servicio web EvalCOMIX en Moodle.
Esta herramienta de software libre es producto del desarrollo llevado a cabo gracias a los proyectos EvalCOMIX, EvalHIDA, FLEXO y Re-Evalúa. Con esta herramienta se diseñan y construyen instrumentos de evaluación (listas de control, escalas de estimación, rúbricas, etc.) que pueden utilizarse integrados en diferentes LMS (Learning Management System) como Moodle, Blackboard o LAMS. En este momento se presenta la versión integrada en Moodle, totalmente operativa y lista para su utilización por parte del profesorado.
Todos los capítulos se estructuran en torno a una presentación básica, en la que se exponen los objetivos que se persiguen, las competencias que se desean desarrollar y los resultados de aprendizaje que se pretenden conseguir en cada uno de ellos. Posteriormente se desarrollan los contenidos y se finaliza con las referencias y la localización de algunos recursos complementarios.
La principal motivación que nos ha llevado a presentar este texto, con el objetivo de difundir y compartir el conocimiento adquirido a lo largo de estos últimos años, ha sido la satisfacción expresada por el profesorado universitario que ha utilizado los primeros borradores de este material. A todos ellos, desde aquí expresamos nuestro más sincero agradecimiento por su colaboración y participación activa interesada únicamente por la preocupación por mejorar su responsabilidad evaluadora como profesores universitarios.
GREGORIO RODRÍGUEZ GÓMEZ
MARÍA SOLEDAD IBARRA SÁIZ
1
eu