TIPOS DE MODELOS
Antes de hablar de modelos de evaluación se debe tener en cuenta que un RED, es: "material en formato digital que se ofrece de manera gratuita y abierta para educadores, estudiantes y autodidactas para su uso y re uso en la enseñanza, el aprendizaje y la investigación" (UNESCO, 2002). p.85. Cuenta con un carácter de interactividad en cada uno de los momentos, además de ser procedimental en el proceso de aprendizaje.
Usabilidad
Estudia el intercambio de información entre las personas y los ordenadores con el objeto de hacerlo más eficiente, de cara a minimizar los errores, incrementar la satisfacción, disminuir la frustración y en definitiva, hacer más productivas las tareas que implican a las personas y los ordenadores (MANCHÓN, 2003). P. 86.
Se analizaron 6 tipos de modelos de evaluación, teniendo en cuenta ciertas características:
Modelo de LORI
EVALUAREED: Recientemente, bajo el auspicio del Ministerio de Educación se ha finalizado el proyecto de investigación y desarrollo EVALUAREED (SEJ2007-62244) destinado a diseñar una metodología para la evaluación de los recursos educativos electrónicos basada en la combinatoria de juicio de experto y la creación de una sonda automática que permita medir la calidad su y categorizarlos en función de los resultados (PINTO, 2010); EVALUAREED permite, en primer lugar, hacer un análisis cualitativo, describiendo las distintas tipologías y sus características, en segundo lugar, ofrecer pautas concretas para conocer la calidad de una de esas tipologías, los OCW y, en último lugar, utilizar un software que ayude a la identificación de su calidad. El resultado final se concreta en el desarrollo de un portal y en la elaboración de un checklist, que ayuda a la identificación de la calidad de los recursos educativos electrónicos de dominio público presentes en las universidades españolas, comprobando su nivel de calidad, destacando las fortalezas y los puntos de mejora.
La metodología empleada para desarrollar EVALUAREED parte de un enfoque cualitativo-cuantitativo para llegar a la definición de un conjunto de criterios e indicadores ponderados, que se aplican a una muestra representativa de recursos con el objeto de determinar su eficacia y eficiencia y sus diferentes contextos y condiciones de uso. Los indicadores son de dos tipos: estimados por expertos humanos y programados en una sonda automática. Se presta especial atención a la relación entre ambos y a su complementariedad de cara a permitir una evaluación asistida por ordenador lo más objetiva posible, aunque sin prescindir del juicio humano en aquellos aspectos en que éste sea necesario. (p. 92 – 93).
El checklist EVALUAREED se estructura en nueve criterios que a su vez contienen 44 indicadores, a través de los cuales se pretende valorar la calidad de los recursos educativos electrónicos. Los grandes bloques de evaluación giran en torno a: 1) calidad del contenido, 2) objetivos y metas de aprendizaje, 3) feedback, 4) usabilidad, 5) motivación, 6) accesibilidad, 7) requerimientos técnicos, 8) propiedad intelectual, y 9) efectividad del recurso desde el punto de vista del aprendizaje.
Instrumento de Evaluación
Modelo de CODA , Herramienta de Evaluación de la Calidad de Objetos de Aprendizaje.
Los Objetos de Aprendizaje (en adelante OA) son Materiales Didácticos Digitales (en adelante MDD) que se utilizan en el aprendizaje en línea en entornos electrónicos (elearning) como los campus virtuales universitarios o los laboratorios de idiomas digitales cuando los MDD se diseñan con el objetivo de que sean escalables, reutilizables, interoperables y accesibles se llaman OA. La ventaja de los OA frente a cualquier MDD es que pueden fácilmente actualizarse, compartirse, documentarse, trasladarse de plataforma informática, almacenarse ordenadamente y recuperarse. Esto se traduce en una reducción de los costes porque: 1) se pueden reutilizar en nuevos contextos disciplinarios, contextos informáticos y, además, pueden constituir la base de nuevos objetos de aprendizaje. También, 2) permiten reducir el esfuerzo de localización de los recursos y, en consecuencia, ayudan a mejorar significativamente el proceso de preparación de las actividades y la calidad de los contenidos didácticos.
¿Para qué necesitamos una herramienta que determine la calidad de los OA? Entendemos que un OA es de calidad cuando es eficaz, didáctica -produce buenos resultados académicos- y tecnológicamente -es un buen producto informático: robusto, interoperable, usable, escalable.
¿Cómo se utiliza la herramienta COdA?
COdA se puede utilizar para guiar la creación de los OA, antes de su utilización real o para valorar su efectividad tecnológica y didáctica potencial de los OA1 . Consiste en un formulario con diez criterios de calidad puntuables de 1 (mínimo) a 5 (máximo) y una guía de buenas prácticas para orientar la puntuación de los OA.
Para cada uno de los criterios propuestos se evaluará la calidad con una puntuación de 1 a 5, siendo 1 el mínimo y 5 el máximo. Si se considera que alguno de los criterios no es 1 5 relevante para el OA evaluado, o si el revisor no se considera cualificado para juzgar ese criterio, siempre se puede evitar seleccionando la opción "No Aplicable" (NA).
¿Qué aporta COdA respecto a otras herramientas de calidad?
En primer lugar aporta una herramienta especialmente dirigida al profesor que es autor, usuario y evaluador de OA. Además, la garantía de que es una herramienta consensuada, fácil de usar, eficaz y fiable. Recoge el mínimo conjunto de criterios de los modelos de calidad nacionales e internacionales sobre la calidad didáctica y tecnológica de los OA; es comprensible y sencilla de llevar a la práctica con conocimientos y recursos informáticos y didácticos básicos, y, finalmente, los criterios se definen de forma precisa para garantizar que se interpretarán de forma semejante. Se ha acercado al máximo la terminología y las recomendaciones tecnológicas al profesor sacrificando algunos aspectos poco comprensibles para los no especialistas en informática. Así, por ejemplo, respecto a los criterios para la interoperabilidad de los OA, COdA recomienda los formatos estándares oficiales pero, además, considera otros formatos de uso generalizado llamados estándares de facto. Respecto a la accesibilidad de los OA para personas con discapacidad, COdA sintetiza las recomendaciones más fáciles de entender e implementar para contenidos web y contenidos multimedia propuestas por los consorcios W3C y IMS Global Learning Consortium (Chisholm, Wendy, ed.lit et al., y Vanderheiden, Gregg., 1999; IMS guidelines for Developing accesibles Learning Applications. Version 1.0, 2002).
Instrumento de Evaluación
Modelo de Evaluación Furps
Modelo propuesto por Hewlett Packard y Robert Grady (1987), este modelo incluye factores de calidad, es un modelo fijo donde se consideran que en la evaluación contiene los mismos factores de calidad. El modelo Furps evalúa su funcionalidad, usabilidad, confiabilidad, desempeño y soporte, de esta manera se utiliza como un clasificador de requisitos.
Metodología
F (Funcionalidad)
- Evalúa la capacidad del sistema educativo para cumplir con sus objetivos y metas.
- Se analiza la cobertura curricular, la efectividad de las estrategias de enseñanza y el logro de los objetivos de aprendizaje.
U (Usabilidad)
- Evalúa la facilidad de uso y acceso a los recursos educativos.
- Se analiza la claridad de la información, la navegación y la interacción con los recursos educativos.
R (Rendimiento)
- Evalúa la eficiencia y eficacia del sistema educativo.
- Se analiza el tiempo de respuesta, la capacidad de carga y la estabilidad del sistema.
P (Seguridad)
- Evalúa la protección de la información y la privacidad de los estudiantes.
- Se analiza la autenticación, autorización, cifrado y respaldo de datos.
S (Soportabilidad)
- Evalúa la capacidad del sistema educativo para adaptarse a cambios y nuevas tecnologías.
- Se analiza la escalabilidad, flexibilidad y compatibilidad del sistema.
Instrumento de evaluación.
F (Funcionalidad)
1. ¿El programa educativo cumple con los objetivos establecidos?
2. ¿Los estudiantes adquieren las habilidades y conocimientos esperados?
3. ¿El currículum es relevante y actualizado?
U (Usabilidad)
1. ¿El material didáctico es claro y fácil de entender?
2. ¿Las actividades y ejercicios son interesantes y motivadores?
3. ¿El entorno de aprendizaje es cómodo y adecuado?
R (Rendimiento)
1. ¿Los estudiantes demuestran un buen rendimiento académico?
2. ¿El programa educativo es eficiente en términos de tiempo y recursos?
3. ¿Se monitorea y evalúa regularmente el progreso de los estudiantes?
P (Portabilidad)
1. ¿El programa educativo se puede adaptar a diferentes contextos y necesidades?
2. ¿Los estudiantes pueden aplicar lo aprendido en diferentes situaciones?
3. ¿El programa educativo es flexible y se puede modificar según sea necesario?
S (Seguridad)
1. ¿El programa educativo garantiza la seguridad y bienestar de los estudiantes?
2. ¿Se protege la privacidad y confidencialidad de los estudiantes?
3. ¿Se cumplen con las normas y regulaciones establecidas para la educación?
Modelo de evaluación ECOBA
El modelo de evaluación Ecoba es un enfoque integral, con el fin de evaluar la calidad de la educación en niveles distintos. Este modelo considera aspectos pedagógicos, administrativos, infraestructurales y comunitarios de las instituciones educativas, siempre teniendo en cuenta que la finalidad es mejorar la calidad del servicio educativo y contribuir al buen desarrollo integral de los estudiantes.
El modelo de evaluación ECOBA (Evaluación de calidad de la educación básica y media). Según ECOBA (Ruiz González y otros, 2007, este sistema de evaluación permite comparar un nivel alcanzado en una escala determinada, a través de los contenidos, y el diseño instruccional de los objetos, por medio del aseguramiento de las competencias por medio de la evaluación y la retroalimentación, con el fin de mejorar la calidad e la educación y ayudar al desarrollo integral de los estudiantes.
Métrica o escala de valoración.
El modelo propone tres ejes principales para determinar la calidad en cada uno de ellos: Pertinencia y Veracidad de los Contenidos, Diseño Estético y Funcional, Diseño Instruccional y Aseguramiento de Competencias
La métrica o escala de evaluación Ecoba se presenta en 4 niveles:
Mala:0 puntos
Regular: 1 punto
Buena: 2 puntos
Muy buena: 3 puntos
Instrumento de evaluación.
1. Cuestionarios: Se utilizan para recopilar información sobre la percepción de los estudiantes, docentes y padres sobre la calidad de la educación.
2. Entrevistas: Se utilizan para recopilar información en profundidad sobre la experiencia y percepción de los estudiantes, docentes y padres sobre la calidad de la educación.
3. Observaciones: Se utilizan para evaluar la calidad de la enseñanza y el aprendizaje en el aula.
4. Análisis de documentos: Se utilizan para evaluar la calidad de los planes de estudio, los programas de enseñanza y los materiales educativos.
5. Pruebas estandarizadas: Se utilizan para evaluar el logro de los estudiantes en diferentes áreas del currículum.
Modelo de evaluación McCall
McCall es un modelo de educación que surgió en la fuerza aérea estadunidense; Reinoso, Vivanco, & Coba (2008), señala que este modelo desglosa el concepto de calidad en tres usos importantes para un producto de software. Según ambos autores los ejes o usos son:
- Operación
- Revisión
- Transición
Métrica o escala de valoración
su valoración va de 1 a 5 en donde 1 es deficiente y 5 excelente
Metodología
Primero se elige el recurso a evaluar luego se identifica el área, grado de aplicación y objetivos y posterior a ello se pasa a evaluar teniendo en cuenta su operación, revisión y transición.
Instrumento de Evaluación
Modelo de evaluación Boehm
En este modelo fue propuesto por Barry Boehm en 1978 en él observamos unos factores, características y subcaracterísticas, los factores de calidad se encuentran estructurados jerárquicamente de alto a bajo nivel, por otra parte no solo se evalúan los ítems allí encontrados también tenemos un espacio de notas en donde podemos escribir las ventajas y desventajas que observemos durante la evaluación del mismo.
Metodología
Primero se elige el recurso a evaluar luego se identifica el área, grado de aplicación y objetivos y posterior a ello se pasa a evaluar teniendo en cuenta esta dividido en 3 características, la primera Es de alto nivel, la segunda es nivel intermedio y por ultimo se encuentra el nivel primitivo, cada una con sus ítems que se valoran de 1 a 5 y permite escribirle las ventajas y desventajas observadas en el software a valorar.