Introducción
El Singapore Examinations and Assessment Board (SEAB), creado en abril de 2004, es el organismo responsable del desarrollo y la administración de todos los exámenes nacionales de Singapur, y supervisa la corrección de unos 450.000 exámenes al año.
El SEAB y el Ministerio de Educación (MOE) de Singapur son las autoridadesexaminadoras conjuntas del Primary School Leaving Examination (PSLE), un examen nacional anual al que se presentan los candidatos al final de su último año de educación primaria en Singapur para facilitar la progresión académica de los estudiantes.
SEAB, MOE y Cambridge International Education son las autoridades examinadoras conjuntas para los exámenes del Certificado General de Educación (GCE) Singapur-Cambridge en Singapur. Incluyen los exámenes GCE N(T)-Level, GCE N(A)-Level, GCE O-Level y GCE-A-Level.
Objetivos
Como una organización con visión de futuro que tiene como objetivo avanzar en la calidad de la evaluación en todo el mundo, SEAB comenzó un proyecto de búsqueda en la pantalla de marcado (OSM) en 2015 para ver qué beneficios podría traer, teniendo en cuenta la calidad de marcado, fiabilidad, seguridad y eficiencia de tiempo para los correctores de exámenes. Descrito por el Sr. Yue Lip Sin, Director Ejecutivo de SEAB, el proyecto tenía como objetivo eliminar los laboriosos procesos de corrección manual, permitiendo a los correctores centrarse en el trabajo profesional de corrección, manteniendo su rigor. El consejo quería realizar la migración gradualmente, para poder conocer el sistema y probarlo a fondo.
Principales retos
Tiempo y recursos intensivos
Para corregir las pilas de exámenes, había que reunir a todos los correctores en las aulas y salas de los centros escolares. El jefe de corrección informaba a todos para asegurarse de que entendían el sistema de calificación.
En Singapur, sólo los profesores a tiempo completo están cualificados para corregir. Para los exámenes de fin de estudios primarios (PSLE), la corrección debe realizarse en un plazo de cuatro días. Esto significaba que unos 14.000 correctores, con los bolígrafos estándar verde, rojo y morado, debían completar la corrección del mayor examen anual de Singapur.
Logística
Los exámenes se enviaron primero a SEAB para que los clasificara y se asegurara de que los exámenes enviados a los centros de corrección no tuvieran conflictos, antes de trasladarlos a los distintos centros de corrección. A continuación, se corregían los exámenes, se tabulaban los resultados y se registraban manualmente en la hoja de calificación del examinador. A continuación, los jefes de equipo procedían a la comprobación manual de cada examen corregido abriendo y cerrando los sobres de los exámenes. El progreso de la calificación se gestionaba mediante actualizaciones registradas en una pizarra blanca y formularios impresos.
Se utilizaban carros para transportar un gran número de sobres con los exámenes corregidos a los armarios para su almacenamiento.
Seguridad y fiabilidad
Los registradores comprobaron manualmente que se contabilizaban los guiones marcados en los sobres de cada centro y la exactitud de las anotaciones de las marcas antes de escanearlos.
Antes de que se introdujera el marcado en pantalla, los registradores tenían que comprobar que se contabilizaban todos los sobres de cada centro.
Foto: Junta de Exámenes y Evaluación de Singapur
La solución
En marzo de 2018, tras un exitoso proyecto piloto de calificación en pantalla con un pequeño número de asignaturas en 2016-17, y estudios en profundidad que analizaban la calidad de la calificación en línea frente a la calificación tradicional en papel, SEAB firmó un contrato con RM para entregar su Sistema Integrado de Digitalización de Guiones y Calificación Electrónica (iDSEM).
El éxito de la implantación de iDSEM y las mejoras que aportó a la calidad de la calificación y la información sobre la calidad de la educación, junto con la forma en que el proyecto se llevó a cabo en colaboración con las partes interesadas, permitieron a SEAB ganar tres premios a la innovación de alto nivel.
Una vez finalizado cada examen, los guiones se envían a la Junta de Exámenes y Evaluación de Singapur para su escaneado.
Foto: Junta de Exámenes y Evaluación de Singapur
Tres premios a la innovación por la implantación de la corrección en pantalla
En julio de 2021, miembros del equipo del proyecto fueron galardonados con un Premio a la Excelencia en la Prestación de Servicios (SDEA) en los Premios a la Transformación del Sector Público (PST), que es una plataforma cumbre de todo el Gobierno que reconoce y premia a los funcionarios y organismos públicos por la excelencia en su trabajo y prácticas organizativas.
En septiembre de 2021, SEAB recibió un galardón de oro en los Premios Innergy del Ministerio de Educación de Singapur (MOE), que reconocen a individuos y equipos a nivel ministerial por desarrollar e implementar con éxito innovaciones que aportan beneficios significativos e impacto en sus lugares de trabajo.
En 2023, SEAB recibió el primer Premio a la Innovación del Ministerio de Educación, que es el máximo galardón a la innovación del Ministerio. Su objetivo es reconocer las innovaciones con un impacto sostenible a gran escala y a nivel de sistema de la sede central del Ministerio de Educación, las escuelas y las juntas estatutarias del Ministerio de Educación.
Lea el artículo de Elisha Tushara en The Straits Times:
"Los exámenes PSLE ahora se corrigen en la pantalla del ordenador".
We are delighted that SEAB’s ‘Integrated Digitalisation of Scanning & Marking’ (iDSEM) project for the Marking of the National Examinations was presented the Service Delivery Excellence Award (SDEA) at the Public Sector Transformation Awards, while also receiving the highest accolade at the inaugural Ministry of Education Minister’s Innovation Award and MOE Innergy Awards.
Winning not one but three awards in such a short space of time acts as a brilliant reminder to both SEAB and RM project teams of their hard work in creating an intuitive marking experience for SEAB examiners and enhancing the marking efficiency, security, and reliability of Singapore’s national examinations.
By partnering with RM to introduce on screen marking, SEAB has significantly enhanced its markers’ ability to manage their workload more efficiently. Increased security and reliability have ultimately improved its learners’ outcomes.
Calificación en pantalla para mayor calidad, fiabilidad, seguridad y eficacia
Desde la implantación de RM Assessor para la corrección en pantalla, los exámenes se corrigen digitalmente en una pantalla de ordenador. Esto ha supuesto una gran eficiencia para SEAB.
En primer lugar, la corrección local de todas las asignaturas del Singapore-Cambridge GCE-Level y del PSLE se realizó en pantalla. Al trabajar con RM para preparar toda la gama de exámenes en solo dos años (pasando de 5 en 2019 a 20 en 2020), SEAB pudo acelerar en un año su calendario para corregir en pantalla todos los guiones de nivel GCE calificados localmente.
Para todas las asignaturas del PSLE en 2022, el número de profesores desplegados para tareas de corrección se ha reducido a la mitad, pasando de 14.000 a unos 7.000 profesores.
Con el sistema de corrección en pantalla, primero se cortan los resúmenes de los libros de respuestas (a un ritmo de 16.000 páginas, o 1.000 resúmenes por hora con 2 cortadoras) y luego se escanean. Cada escáner puede escanear 140 cuadernillos por hora. Cada cuadernillo tiene un código de barras único, un código QR, la etiqueta de identificación del candidato y guías técnicas que permiten al escáner y a la aplicación informática identificar y procesar los documentos.
El sistema comprueba automáticamente si hay errores en cada cuadernillo escaneado, lo que reduce el trabajo humano del personal de la SEAB, que realiza una segunda ronda de comprobaciones. A continuación, los candidatos son asignados a los correctores a través del sistema de corrección en pantalla, listos para comenzar la corrección.
Una vez asignada una serie de preguntas en la reunión de normalización, cada corrector debe realizar una corrección práctica a través del sistema de corrección en pantalla. Esto agiliza el proceso de normalización y permite a los correctores empezar a evaluar antes.
Antes, los correctores tenían que esperar a que otro corrector terminara las preguntas asignadas para pasarle el guión. Ahora, dos correctores pueden corregir simultáneamente diferentes preguntas de un mismo examen, lo que reduce el número de correctores.
En 2023, el número de días de corrección del PSLE se redujo de cuatro a tres días. Esto supuso una reducción del 25% en el coste de corrección de los exámenes.
Los resultados de la encuesta anual de SEAB sobre la satisfacción de sus correctores dieron una calificación media de 3,9 sobre 4 para el sistema de corrección en pantalla RM Assessor, afirmando que era una gran mejora. Los correctores lo consideraron sólido y estable.
Con la transición a la calificación en pantalla, SEAB también ha podido mejorar aún más sus procesos de control de calidad.
Los correctores más veteranos pueden sembrar guiones de control de calidad o realizar comprobaciones aleatorias para evaluar si algunos correctores están siendo demasiado indulgentes o severos. Los correctores también pueden consultar más fácilmente al personal superior gracias a las funciones de comunicación del sistema. A medida que se recopilan más datos de corrección, los correctores superiores pueden identificar las áreas en las que los miembros de su equipo podrían necesitar una mayor formación e incluso estudiar el despliegue de correctores en función de sus puntos fuertes. Gracias a estos procesos y controles de control de calidad, SEAB ha podido reducir el tiempo de entrega de los trabajos sin comprometer la calidad de la corrección.
El análisis de datos que hace posible la corrección en pantalla no sólo es beneficioso para el control de calidad, sino también para el desarrollo del plan de estudios, utilizando los datos a nivel de ítem para ver patrones de puntos fuertes y débiles para informar la enseñanza futura. Una de las ventajas inigualables de la corrección en pantalla es la captura in situ de enormes cantidades de datos detallados sobre la corrección, que pueden utilizarse para el posterior análisis de datos.
