INTRODUCCIÓN:
En los últimos años son numerosos los estudios de investigación que se han realizado con el fin
de definir cuáles deben ser los indicadores que determinen la calidad de un sistema e-learning,
algunos de las propuestas más representativas serían las siguientes:
- Proyecto europeo MECA-ODL.
- Quality on the line.
- E-learning Courseware Certification (ECC)
- BENVIC Proyect
Cada uno de ellos toma una orientación distinta, “la mayor parte de las propuestas y modelos
giran, o bien en al modelo EFQM o a los sistemas basados en benchmarking” Aretio (2006), el
primer caso lo represetaría por ejemplo el proyecto MECA-ODC, mientras que el BENCIV
Proyect toma como forma de trabajo el benchmarking entre varias Universidades.
La evaluación del e-learning es compleja ya que se puede evaluar desde la propia institución,
pasando por el diseño y distribución de la acción formativa, hasta llegar al beneficio-coste ROI
del programa, por otra parte la evaluación de profesores puede llevarse a cabo solo desde el
punto de vista del alumno o por pares, es decir, evaluación entre propios docente, además
puede ser interna (de la propia institución), externa (realizada por un órgano consultor) o
combinar ambos elementos.
Aquí hemos optado por concentrarnos en los aspectos pedagógicos, por lo que hemos omitido
la evaluación de la institución y la evaluación ROI, y hemos agrupados las distintas variables en
tres grandes bloques:
- Entorno: Analizando si dicho entorno satisface las necesidades para poder desarrollar
un aprendizaje constructivista, por ejemplo, en relación a su capacidad de permitir el
trabajo en grupo y las posibilidades de interacción no solo entre el profesor y el
alumno, sino entre los propios alumnos.
- Proceso: Desde el momento en el que el alumno viene a informarse sobre la oferta
formativa, hasta la evaluación del propio proceso de formación, pasando por la tutoría
y la evaluación de aprendizajes.
Cada uno de estos grandes bloques se ha dividido en indicadores, los cuales tratan de analizar
a través de una serie de evidencias hasta qué punto la acción formativa se adapta como ya
hemos comentado anteriormente a la concepción constructivista de la educación e-learning.
FUNDAMENTACIÓN TEÓRICA:
El protocolo de evaluación que se desarrolla en el presente documento toma como bases
teóricas las relacionadas con los conceptos de cognición situada y constructivismo social, para
lo cual se ha tenido en cuenta los siguientes aspectos que se consideran claves a la hora de
desarrollar una acción formativa que sea valiosa en el ámbito del e-learning:
- El diseño del curso.
- El entorno de enseñanza-aprendizaje
- El proceso de enseñanza-aprendizaje.
Pasamos a continuación a describir cuales son las claves teóricas en relación a los puntos
señalados anteriormente:
Por otra parte debe garantizarse que tanto los contenidos como las actividades
propuestas promueven efectivamente aprendizajes significativos, para lo cual se
considera que es fundamental en relación a los contenidos el empleo de una gran
variedad de recursos que se ajusten en cada momento al mensaje que se quiera
transmitir, y en cuanto a las actividades de formación el empleo de una metodología
que se acerque a las bases del constructivismo social que fomente por tanto el trabajo
colaborativo y las comunidades de aprendizaje.
b) ENTORNO DE ENSEÑANZA-APRENDIZAJE:
Si nos proponemos llevar a cabo una acción formativa basada en el modelo
constructivista un aspecto básico a tener en cuenta será el análisis de la capacidad que
el entorno de enseñanza-aprendizaje posee para permitir la comunicación entre los
distintos elementos que forman parte del proceso de formación (materiales, profesor,
estudiantes).
Por otra parte, también teniendo en cuenta las bases del modelo constructivista en el
que es el estudiante el que se construye su propio aprendizaje, también debe
estudiarse la capacidad del entorno para adaptarse a los estilos de aprendizaje de cada
estudiante. En relación a este punto se considera que el entorno debe poseer un
sistema eficaz de ayudas, acceso a recursos bibliográficos y programas que les sean de
utilidad, así como la posibilidad de que el alumno pueda ver en cada momento su
grado de avance dentro de los objetivos que pretende la acción formativa.
También se han incluido algunos aspectos dentro del estudio del entorno EVA tales
como la facilidad de acceso y navegación, la interfaz, la facilidad de la gestión de los
cursos por parte del profesor, que se consideran que contribuyen a la correcta marcha
de cualquier curso virtualizado.
c) PROCESO DE ENSEÑANZA-APRENDIZAJE:
Al analizar el proceso de enseñanza-aprendizaje debemos resaltar el estudio del papel
que debe cumplir el tutor dentro de dicho proceso de aprendizaje, que desde el punto
de vista constructivista debe pasar de ser un instructor a un guía, recayendo como
hemos expuesto anteriormente en el propio estudiante el peso de la construcción de
su propio conocimiento.
Por último, debemos señalar que respecto al estudio del proceso de enseñanza-
aprendizaje se han incluido aspectos relacionados con la información al alumno antes
y durante el periodo de matrícula tanto sobre el perfil del alumnado al que está
dirigido como de los requisitos técnicos y conocimiento previos necesarios, que
pueden ser importante a la hora de evitar falsas expectativas en el alumnado con
respecto a lo que el programa ofrece lo cual puede llevar al abandono o mal
aprovechamiento del mismo, sobre todo cuando se pretende que el alumno tome un
papel activo en el proceso formativo.
- Primer paso: Para cada evidencia se elige un valor entre el 1 y el 4 en función del
menor o mayor grado de cumplimiento de la evidencia.
- Segundo paso: La intención es que este checklist sea flexible, y pueda ser modificado a
criterio del técnico que esté realizando la evaluación, por ese motivo se ha dejado en
blanco en valor peso, con el fin de que la persona u organización que esté realizando la
evaluación valore la importancia de cada evidencia, pudiendo llegar a darse en caso de
que se decida un valor igual a cero.
- Cuarto paso: Se considera que una evaluación debe permitir plantear valores
subjetivos, para ello se ha dejado una zona en la que la persona encargada de la
evaluación podrá realizar comentarios que serán recogidos en un documento aparte y
que completaran la información objetiva obtenida a través del checklist.
1.- DISEÑO DEL CURSO:
La formación, independientemente de su modalidad debe ser objeto de planificación o diseño
de forma que se asegure de que no se improvisan los procesos y que estos van dirigidos a
mejorar la competencia de los destinatarios para un mejor desarrollo profesional.
Diseñar la formación representa un proceso que parte del estudio de la situación actual de
adquisición de competencia por parte de las personas participantes en el programa de
formación.
Para dar respuesta a estas necesidades se diseña una estructura que va a permitir desarrollar
los aprendizajes descritos en los objetivos del programa.
INDICADORES:
El diseño del programa tiene en cuenta las características de los destinatarios a los que va
dirigido, y se adecúa a sus características.
1.1. El diseño del programa tiene en cuenta las características de los destinatarios a los que
va dirigido, y se adecúa a sus características.
1.5. Los contenidos que se ofrecen al alumno durante el proceso de enseñanza aprendizaje
facilitan el desarrollo de aprendizajes de alto nivel cognitivo.
1.6. Las actividades propuestas en el curso fomentan los aprendizajes significativos, el trabajo
colaborativo y capacidad de transferencia de aprendizaje al puesto de trabajo.
1.7. Se proporciona al alumno una gran variedad de recursos, acordes con los objetivos del
programa.
INDICADOR 1.1: El diseño del programa tiene en cuenta las características de los
destinatarios a los que va dirigido, y se adecúa a sus características.
TOTAL
INDICADOR 1.2: Se ha determinado cual es el perfil de formación (competencias académicas
y profesionales) que se pretende conseguir con el programa de aprendizaje.
TOTAL
INDICADOR 1.3: El programa de formación docente específica sus objetivos en términos de
competencias docentes y están en consonancia con las necesidades de aprendizaje de los
alumnos.
TOTAL
INDICADOR 1.4: El modelo de formación se acerca a los principios de la pedagogía
constructivista.
TOTAL
INDICADOR 1.6: Las actividades propuestas en el curso fomentan los aprendizajes
significativos, el trabajo colaborativo y capacidad de transferencia de aprendizaje al puesto
de trabajo.
TOTAL
INDICADOR 1.7: Se proporciona al alumno una gran variedad de recursos, acordes con los
objetivos del programa.
TOTAL
2.- ESTUDIO DEL ENTORNO DE ENSEÑANZA APRENDIZAJE:
Los ambientes virtuales de aprendizaje deben apoyar el proceso de formación haciendo
“amigable” la interacción entre personas y ordenadores. Igualmente deben proporcionar la
adecuada flexibilidad entendida como la capacidad del espacio de ambiente de aprendizaje
para ser sensible a las diferentes motivaciones, intereses y estilos de aprendizaje.
INDICADORES:
TOTAL
INDICADOR 2.2: Facilidad de acceso al entorno de aprendizaje.
TOTAL
INDICADOR 2.3: El alumno recibe las ayudas necesarias para utilizar de forma eficaz cada una
de los servicios que pone a su disposición la plataforma de aprendizaje.
TOTAL
INDICADOR 2.4: Entorno audiovisual (interfaz).
TOTAL
INDICADOR 2.5: Facilidades en el sistema de matriculación, configuración de los cursos e
incorporación de contenidos.
TOTAL
INDICADOR 2.6: Herramientas de comunicación.
TOTAL
INDICADOR 2.7: El ambiente de aprendizaje soporta un amplio rango de estilos de
aprendizaje.
TOTAL
INDICADOR 2.8: La navegación a través del entorno de aprendizaje es sencilla, y el alumno
conoce en todo momento su ubicación dentro de la plataforma.
TOTAL
INDICADOR 2.9: Existencia de un sistema de gestión para el seguimiento del itinerario de
aprendizaje del alumno.
TOTAL
INDICADOR 2.10: Los estudiantes tienen acceso a recursos bibliográficos y aplicaciones
informáticas.
TOTAL
3.- PROCESO DE ENSEÑANZA APRENDIZAJE:
Una vez definidos los aspectos básicos del diseño del programa (objetivos, metodología,
contenidos, actividades, recursos) y el contexto que vamos a utilizar para llevar a cabo la
acción formativa, es el momento de poner en marcha el proceso de enseñanza aprendizaje.
Ahora bien, debemos considerar que dicho proceso comienza en el preciso instante en el que
el alumno acude a la institución para informarse sobre los cursos que se ofertan y las
características de los mismos, ya que una adecuada orientación en esta fase permitirá un
mayor ajuste entre lo realmente ofertado y las expectativas del alumno, lo cual evitará un gran
número de problemas a lo largo del proceso de enseñanza (abandono de los estudios, bajo
rendimiento,….).
Por otra parte, el proceso de enseñanza no termina con la calificación del alumno, sino que
debe incluir también la evaluación de los procesos (evaluación del diseño del programa,
evaluación del profesorado,….) y dicha evaluación debe extenderse en el tiempo a través del
seguimiento del alumno, con el fin de obtener un amplio abanico de indicadores que permitan
la mejora continua del programa de formación.
INDICADORES:
3.2. Se proporciona al alumno una información adecuada sobre los requisitos y procesos de
selección y matrícula.
3.4. La figura del tutor dentro del proceso es considerada como una pieza clave en relación a la
motivación y aprendizaje del alumnado.
3.5. La evaluación de los aprendizajes está presente en todos y cada uno de los momentos del
proceso de formación y es considerada una pieza clave del sistema.
3.6. Se contempla la evaluación del propio proceso de enseñanza como herramienta de mejora
del mismo.
3.7. El programa contempla mecanismos con los cuales seguir ofreciendo servicios a los
alumnos una vez finalizado el proceso de enseñanza-aprendizaje.
INDICADOR 3.1: Se proporciona al alumno una clara información antes de su inscripción en el
curso.
TOTAL
INDICADOR 3.2: Se proporciona al alumno una información adecuada sobre los requisitos y
procesos de selección y matrícula.
TOTAL
INDICADOR 3.3: Se informa adecuadamente al alumnado sobre los requisitos técnicos y
conocimientos previos a nivel informático para poder seguir de forma adecuada el programa
de formación.
TOTAL
INDICADOR 3.4: La figura del tutor dentro del proceso es considerada como una pieza clave
en relación a la motivación y aprendizaje del alumnado.
TOTAL
INDICADOR 3.5: La evaluación de los aprendizajes está presente en todos y cada uno de los
momentos del proceso de formación y es considerada una pieza clave del sistema.
TOTAL
INDICADOR 3.6: Se contempla la evaluación del propio proceso de enseñanza como
herramienta de mejora del mismo.
TOTAL
INDICADOR 3.7: El programa contempla mecanismos con los cuales seguir ofreciendo
servicios a los alumnos una vez finalizado el proceso de enseñanza-aprendizaje.
TOTAL
ANEXO 1: EJEMPLO DE APLICACIÓN DEL PROTOCOLO DE
EVALUACIÓN:
A continuación se aplicará el protocolo en el estudio de las características de una plataforma
de educación a distancia, para ello tomaremos como referencia el entorno Moodle:
INDICADORES:
TOTAL 9 36
INDICADOR 2.2: Facilidad de acceso al entorno de aprendizaje.
TOTAL 6 20
INDICADOR 2.3: El alumno recibe las ayudas necesarias para utilizar de forma eficaz cada una
de los servicios que pone a su disposición la plataforma de aprendizaje.
TOTAL
TOTAL 12 38
TOTAL 22 88
TOTAL 19 63
TOTAL 22 82
TOTAL 19 63
TOTAL 12 42
RESULTADOS DE LA EVALUACIÓN:
100 100
100
91
90
83
80 77 77 77
72
66 Columnas 3D 1
70
60
50
2.1 2.2 2.3 2.4 2.5 2.6 2.7 2.8 2.9 2.10
A la vista de los resultados, vemos que la plataforma Moodle destaca principalmente por su
gran compatibilidad con los sistemas operativos, navegadores y a la hora de integrar objetos
de aprendizaje estandarizados. Así mismo, también obtenemos muy buenos valores a la hora
de estudiar las posibilidades que la plataforma ofrece para la configuración de los cursos, así
como la gestión de alumnos.
Tal vez debemos resaltar como aspectos más deficientes aquellos relacionados con la interfaz,
la navegación y el facilitar la búsqueda e instalación de las herramientas o bloques que no
vienen integradas en la instalación típica de la plataforma.
BIBLIOGRAFÍA:
- Colas, P., Rodríguez, M. y & Jiménez, R (2005): Evaluación de e-learning. Indicadores de
calidad desde el enfoque sociocultural.
http://campus.usal.es/~teoriaeducacion/rev_numero_06_2/n6_02_art_colas_rodriguez_ji
menez.htm