¿Cómo escoger la herramienta de eProctoring más adecuada?

En este post continuamos con la serie de artículos relacionados con el eProctoring. En este caso nos centraremos en los factores a tener en cuenta para la elección de la herramienta más adecuada según las necesidades de cada centro educativo.

En base a nuestra experiencia, los factores más determinantes a la hora de seleccionar una herramienta de eProctoring son:

1. Funcionalidades ofrecidas
2. Integraciones con la plataforma de gestión de aprendizaje y sistemas de evaluación
3. Características técnicas
4. Aspectos legales
5. Precio

1. Funcionalidades

Son varias las funcionalidades que se pueden analizar a la hora de escoger una herramienta de eProctoring. A continuación se describen las más destacadas:

• Validación de la identidad mediante cámara web

Las herramientas de eProctoring se basan en la comparación de imágenes capturadas durante la prueba con una imagen de referencia, habitualmente a partir de un documento de identidad. Esta imagen de referencia normalmente se recoge al inicio de cada prueba, de forma que el estudiante ha de mostrar a cámara su documento de identidad, pero también existen sistemas que ofrecen la posibilidad de realizar un registro único a nivel de alumno, de forma que este registro de la identidad sea válido para todos los exámenes que realice un estudiante en un periodo determinado.

• Captura de imágenes aleatorias durante la prueba

La principal forma de validación de la identidad consiste en la captura de imágenes del estudiante mientras realiza la prueba. Estas capturas se pueden realizar de forma aleatoria en el tiempo o bien con un intervalo de tiempo fijo entre capturas. 

También existen herramientas que realizan la grabación de toda la sesión, permitiendo un seguimiento segundo a segundo. Esto aporta un mayor grado de seguridad pero, en general, requiere de unas necesidades técnicas mayores por parte del equipo informático de los estudiantes.

• Control de la actividad del estudiante

Con el objetivo de reducir las opciones de realización de trampas, algunas herramientas de eProctoring permiten controlar la actividad del estudiante en su ordenador. Dentro de este conjunto de funcionalidades podemos encontrar opciones como:

- Obligatoriedad de uso de navegadores seguros
- Aplicaciones que graban toda la actividad del ordenador
- Limitación de aplicaciones en funcionamiento (pueden cerrar otros navegadores, aplicaciones de mensajería…)
- Deshabilitar determinadas funciones, como pueden ser clic con el botón derecho, capturas de pantalla, copiar y pegar, etc.
- Evitar el uso de máquinas virtuales o escritorios remotos
- Forzar la realización del examen en modo pantalla completa
- Impedir la visita a determinados sitios web
- Borrar la caché después de realizar el examen

• Sistemas adicionales de monitorización

Además de la captura y análisis de la imagen capturada a través de la webcam y del control de la navegación y actividad del estudiante, las herramientas de eProctoring ofrecen un variado conjunto de sistemas de vigilancia:

- Análisis de la dirección IP, para identificar a estudiantes que puedan estar realizando el examen desde un mismo lugar
- Grabación del sonido ambiente
- Grabación con una segunda cámara
- Análisis del tráfico web del estudiante
- Grabación 360º del espacio desde el que se realiza la prueba antes de iniciarla.
- eProctoring en directo, vigilancia con supervisión humana de las incidencias detectadas.
- Análisis de patrones de teclado

• Informes para los evaluadores

Es imprescindible que los evaluadores reciban un informe de la actividad del estudiante. De la calidad de estos informes y de las facilidades que aporten a los evaluadores para centrar su atención en los estudiantes que hayan realizado trampas con mayor probabilidad dependerá en gran medida el éxito de la implantación de los sistemas de eProctoring. Algunos aspectos a tener en cuenta son:

- Disponibilidad de listados que permitan la reordenación por gravedad o volumen de incidencias
- Formato e información contenida en los informes, que faciliten una rápida evaluación de cada una de las vigilancias realizadas
- Tiempo que tarda en generarse el informe desde la finalización de la prueba
- Disponibilidad de informes o alertas de incidencias en tiempo real que permitan contactar con el estudiante para poder resolver incidencias técnicas. 

2. Integraciones

Un aspecto fundamental es asegurar que la herramienta escogida se integra con los sistemas de gestión de aprendizaje (LMS) disponibles en la institución. 

La práctica totalidad de herramientas se integran de forma directa con las plataformas LMS más utilizadas, como pueden ser Moodle o Blackboard, y muchas de ellas ofrecen, con un coste adicional, la posibilidad de realizar integraciones a medida a través de APIs.

3. Características técnicas

Otro aspecto a tener en cuenta son las características técnicas de la herramienta de eProctoring. En este apartado es importante tener en cuenta tanto las características de la propia solución como las necesidades técnicas que suponen para los estudiantes.

En lo referente a las necesidades de la herramienta, es importante considerar aspectos como la infraestructura cloud utilizada por cada una de ellas, o métricas como la concurrencia máxima permitida (número de exámenes que se pueden realizar simultáneamente). En este sentido algunas herramientas ofrecen la posibilidad de adaptar sus entornos, ofreciendo clusters dedicados para situaciones donde sea necesario garantizar la simultaneidad de varios miles de exámenes.

En lo que respecta a las necesidades técnicas de los estudiantes es importante tener en cuenta cuestiones como:

• Resolución mínima de la cámara web requerida
• Ancho de banda de la conexión a internet necesario para garantizar el correcto funcionamiento durante el examen
• Requisitos de versiones de sistema operativo o aplicaciones adicionales

4. Aspectos legales

En lo relativo a los aspectos legales que afectan a la elección de la herramienta es importante tener en cuenta aspectos como:

• Cumplimiento del Reglamento General de Protección de Datos (RGPD)
• Tiempo que la información capturada permanece almacenada en los sistemas de la empresa proveedora y posibilidad de solicitar su borrado

5. Precio

El precio puede llegar a suponer un factor determinante a la hora de escoger una herramienta en el caso de que varias cumplan las necesidades mínimas de la institución. 

A la hora de obtener el precio unitario por cada uno de los exámenes es importante analizar las políticas de precios de cada una de ellas. En este sentido los precios pueden venir definidos por:

• Precio por examen
• Precio por usuario y/o curso, de forma que por cada alumno se paga una cuota fija que le permite realizar exámenes ilimitados
• Costes de licencias asociados a la propia herramienta o a software de terceros, como puede ser el caso de los navegadores seguros
• Descuentos por volúmenes elevados de exámenes (a partir de varios miles de exámenes en un periodo de tiempo determinado)

Después de analizar todos los factores es posible que ninguna herramienta satisfaga plenamente las necesidades de la institución académica, ya sea por necesidades específicas a nivel de integración, de protección de los datos o de los requisitos de monitorización.

Llegados a este punto puede ser razonable plantearse la necesidad de desarrollar una herramienta a medida. Si bien la inversión inicial será superior, a largo plazo puede suponer un ahorro a nivel económico por la amortización en cada una de las pruebas realizadas, y una mejora en la aceptación de la herramienta de eProctoring por parte de toda la comunidad educativa, ya que estará plenamente adaptada a sus necesidades y procesos.

Las herramientas de eProctoring existentes en el mercado ofrecen un amplio abanico de funcionalidades, por lo que analizar las características de cada una de ellas permitirá seleccionar aquellas que ofrezcan una mejor adaptación a las necesidades y retos concretos de cada centro educativo.

Desde Opentrends podemos ayudar y acompañar a las instituciones educativas en este proceso de análisis, selección e implantación de la herramienta más adecuada.

En el siguiente artículo cerraremos esta serie de artículos dedicados al eProctoring presentando cómo podemos incorporar los sistemas de eProctoring en los procesos de evaluación.