TEMA 7: Evaluación y Rendición de Cuentas
OBJETIVOS ESPECÍFICOS
Reconocer la importancia de contar con estrategias de evaluación y seguimiento de las Políticas de TIC y Educación.
Identificar elementos críticos de los proceso de evaluación y seguimiento de las iniciativas de TIC y Educación.
DESCRIPCIÓN GENERAL
Es evidente que hay una creencia generalizada de que la integración de las TIC a los procesos de enseñanza y aprendizaje coadyuvará al logro de los objetivos educativos, y promoverá el desarrollo y la plena participación de los ciudadanos en la sociedad del conocimiento. Sin embargo, hay poca evidencia y pocos estudios del impacto real del uso de las TIC en la Educación para el logro de dichos objetivos.
La escasez de estudios relacionados con el impacto de las TIC en la Educación se puede entender por lo complejo de su integración, por los múltiples factores que se involucran en su desarrollo y por los costos que implican su instrumentación.
La importancia de contar con estudios e información detallada de los procesos de integración de las TIC en la educación es muy importante para:
Orientar la toma de decisiones y emprender acciones correctivas durante los procesos de instrumentación de la Política de TIC y Educación.
Para orientar futuras recomendaciones y modificaciones de la Política de TIC y Educación.
Identificar las mejores prácticas educativas y difundirlas.
Optimizar el uso de recursos humanos y financieros.
Mostrar los avances y lograr apoyo permanente de los distintos sectores involucrados.
Aprender de los errores y promover una cultura de la evaluación y seguimiento permanente orientada a la mejora continua.
Hacer conciencia entre todos los actores involucrados que los procesos de cambio y aprendizaje son procesos lentos y graduales.
A continuación presentamos un esquema conceptual desarrollado por Daniel A. Wagner que sirve para ilustra el proceso de evaluar y dar seguimiento a las acciones de TIC y Educación:
En esta figura se pueden identificar los diferentes elementos que intervienen en la instrumentación de las TIC en Educación y sus interrelaciones. Una vez definidos los contextos y las funciones de las TIC, se puede diseñar un plan para la evaluación y seguimiento de las iniciativas. Dicho plan debe describir los componentes de la intervención , la función de las TIC en: el currículo, la pedagogía y la evaluación. También debe especificar la infraestructura requerida: equipo, aplicaciones educativas, tecnología de redes, etc. Además, debe incluir los recursos humanos necesarios: docentes capacitados en el uso de los equipos, en el uso de software y en la integración al currículo. La primera tarea de evaluación debe ser la de elaborar indicadores para asegurar que los componentes de la intervención se hayan realizado, ya que sin éstos no tiene sentido valorar su impacto. Posteriormente, el plan de evaluación y seguimiento definirá indicadores para evaluar los resultados intencionales , en el entendido que se involucran otros factores y que son difíciles de medir, pero son los resultados esperados a largo plazo: impacto entre los estudiantes, los resultados de la implementación y los conocimientos, habilidades y actitudes que se espera de los estudiantes. El plan de evaluación y seguimiento también debe incluir los factores moderados que influencian el desarrollo de la intervención: apoyo local, disponibilidad, calidad y pertinencia de los contenidos digitales, acceso a las TIC en casa y espacios comunitarios.
Se pueden utilizar una variedad de metodologías cualitativas y cuantitativas de evaluación: estudios de caso, entrevistas, observaciones de campo, estudios comparativos, análisis estadísticos, etc. Se recomienda definir una serie de indicadores que aborden los diferentes aspectos tecnológicos y educaciones que intervienen en la instrumentación de TIC y Educación.
ASPECTOS CRÍTICOS
En la definición y estrategias de líneas de acción relacionadas con la evaluación y seguimiento de programas de integración de las TIC a los procesos de enseñanza y aprendizaje conviene considerar las recomendaciones que presenta Daniel A. Wagner en Monitoring and Evaluation of ICT in Education Projects: A Handbook for Developing Countries. :
Sí incluya monitoreo y evaluación en todas las etapas de los programas educativos.
Sí reconozca que no obstante que el monitoreo y evaluación tienen implicaciones significativas en cuanto a costo, tiempo y recursos humanos, son esenciales para programas exitosos.
Sí asegúrese que aquellos involucrados en el monitoreo y evaluación sean capacitados adecuadamente y entiendan la importancia del monitoreo y evaluación.
Sí involucre a tantos grupos de interés como sea posible en las funciones de monitoreo y evaluación.
Sí involucre a los educandos en cualquier proceso de evaluación.
Sí evalúe el aprendizaje del estudiante.
Sí asegúrese que a todo monitoreo, evaluación y valoración de instrumentos se le aplique una cuidadosa prueba piloto.
Sí asegúrese de promover la idea de que el monitoreo y evaluación se tratan de aprender de las experiencias de un programa.
No simplemente monitoree y evalúe por hacerlo; no mida sólo por medir.
No imponga una estructura de manejo punitiva que busque utilizar el monitoreo y la evaluación como una forma de criticar negativamente el desempeño.
No se aventure a realizar funciones de monitoreo y evaluación a menos que cuente con los fondos suficientes.
No intente apresurar la implementación de las TIC para iniciativas educativas.
No se enfoque exclusivamente en la tecnología.
No permita que la auto generación de reportes sea la única forma de determinar el aprendizaje en una población objetivo, y no intente utilizar sólo personal externo para el monitoreo y evaluación.
No olvide que la “cultura es local”.
No olvide considerar los resultados no pretendidos de los programas.
No olvide que las TIC cubren una gran variedad de tecnología – no sólo se enfoque en las computadoras.
No olvide la importancia de la variación contextual y geográfica.
No se preocupe si no lo entiende completamente la primera vez.
No salga de su reunión sobre estrategia de implementación de ICT sin tener presentes las funciones de monitoreo y evaluación como un componente base del proceso.
EJEMPLOS
A continuación se presentan los indicadores de evaluación que se definieron en la Política de TIC y Educación de la República de Namibia.
Medidas de Desempeño en Namibia
La medición del desempeño es un prerrequisito para el manejo eficiente y eficaz de resultados, métodos de entrega y pertinencia de esta política. Asimismo aumenta la confianza de muchos socios externos facilitando así la creación de dichas sociedades y mejorando el acceso a recursos más allá del gobierno de Namibia.
El Grupo Ejecutivo publicará medidas de desempeño para esta política. Estas medidas abordarán la Identificación y/o Desarrollo de las TIC adecuadas para la Educación , Distribución y entrega de la TIC , Mantenimiento y Soporte de la TIC , Alfabetización en el uso de la TIC e Integración de las TIC. Como mínimo, el Comité Ejecutivo publicará medidas de:
- Niveles de Alfabetización básica en TIC para egresados de Escuelas Secundarias.
- Niveles de confianza al utilizar las TIC entre profesores y demás personal educativo.
- Niveles de acceso a recursos de la TIC por estudiantes/educandos (desglosados por nivel educativo).
- Niveles de acceso a recursos de la TIC por profesores (desglosado por nivel educativo al que imparten).
- Uso de las TIC para respaldar el aprendizaje y enseñanza (desglosado por plan de estudios).
- disponibilidad y uso de materiales electrónicos de enseñanza de soporte para apoyar cada plan de estudios.
Adicionalmente, el Grupo Ejecutivo debe asegurar que:
- Cada sitio educativo sea calificado regularmente para que se le asigne un nivel de desarrollo de las TIC, y
- Cada servicio tenga implementadas medidas de desempeño definidas.
PREGUNTAS PARA REFLEXIÓN Y FUTURO DEBATE
¿Qué información se tiene en su país sobre el impacto de las estrategias de TIC y Educación?
¿Qué instituciones en su país podrían tener un papel relevante y prioritario en la evaluación y rendición de cuentas de la Política de TIC y Educación?
¿Qué tipo de cooperación regional puede establecerse para compartir y comparar resultados de la evaluación y seguimiento de los efectos de las estrategias y los programas de TIC en Educación?
REFERENCIAS Y RECURSOS
Monitoring and Evaluation of ICT in Education Projects: A Handbook for Developing Countries. Borrador de prepublicación para circulación en la Cumbre Mundial sobre la Sociedad de Información (Tunis, Noviembre, 2005).
“Evaluation and Assessment” Tomado de Schoolnet toolkit . UNESCO-Asia and Pacific Regional Bureau for Education / Commonwealth of Learning . 2004.
El documento presenta interesantes indicadores para evaluar la calidad de la educación con las TIC, además de reportar experiencias realizadas en naciones del sudeste asiático, que no por ello dejan de ser ilustrativas para encauzar esfuerzos similares en nuestros países.
Wolf, Lawrence. “Las Evaluaciones Educacionales en América Latina: Avance Actual y Futuros Desafíos” Programa de Promoción de la Reforma Educativa en América Latina y El Caribe. 1998
Laurence Wolf, asesor en educación del Banco Interamericano de Desarrollo, presenta en este texto experiencias latinoamericanas y de naciones desarrolladas en materia de evaluación educativa, para posteriormente derivar puntos críticos respecto a lecciones que han aportado y desafíos que se hacen evidentes para consolidar las acciones en la materia.
“Información y estándares: Dos elementos centrales para la rendición de cuentas en los sistemas educativos” en Rendición de cuentas 4, Formas y reformas de la educación. PREAL.
http://www.preal.org/Archivos/Bajar.asp?Carpeta=Preal%20Publicaciones\Serie%20Políticas&Archivo=Politicas20.pdf Este documento destaca la necesidad de generar estándares que permitan evaluar de manera sistemática la educación, especialmente con la intención de contar con información congruente entre un estudio y otro, sin por ello desechar intereses y enfoques de particular interés para una institución u otra. |