Tecnologias_seguridad_evaluaciones.Rmd

---
title: "Alternativas Tecnológicas<br>dirigidas a la seguridad de las<br>Evaluaciones en línea"
output: 
  revealjs::revealjs_presentation:
    template: plantilla.html        
    theme: blood 
    highlight: pygments
    center: true
    transition: fade
    self_contained: false
    reveal_plugins: ["notes", "chalkboard"]
    reveal_options: 
      slideNumber: true
      previewLinks: true
      controls: false
    includes:
      after_body: footer.html
    css: style.css      
---

## {data-background="Gfx/solo.jpg"}

<aside class="notes">

- La emergencia sanitaria llevó a que los estudiantes tengan que esforzarse y tomar más responsabilidad sobre su educación.
- Esto parece ser maravilloso para los que toman en serio su aprendizaje y la evaluación como herramienta de aprendizaje.
- Pero como ha impactado el aprendizaje. ¿Ha sido positivo? ¿Los estudiantes estaban preparados?

</aside>

## Estadísticas rendimiento {}

Porcentaje de créditos aprobados al ingreso en los últimos cinco años.

![Rendimiento 2016 - 2020](Gfx/creditos_16-20.png)
<small> **Fuente:** SAG - PUCP</small>

<aside class="notes">

- Estas son las estadísticas de los últimos 5 años. Porcentaje de créditos aprobados promedio.
- Se puede decir que los porcentajes se mantiene. Menos en el primer ciclo del 2020 donde hay una subida impresionante.
- Siendo el 2020 un mal año para los estudiantes, en cuanto al la escuela se espera que el 2021 los porcentajes vuelvan a bajar, ya que en los estudios de rendimiento de las pruebas de admisión se observan caídas en el desempeño.
- Lo deben de esta viviendo ustedes en este primer ciclo 2021.

</aside>

# ¿A que se debe esta notable mejora? 

<aside class="notes">

- Es posible que los estudiantes hayan venido muy preparados para la educación virtual.
- Es posible que los profesores demoraron en adaptarse a la educación virtual. Sobre todo a las formas de evaluación.
- Se están aprendiendo nuevas prácticas que pronto se verán en acción en próximos ciclos.

</aside>

## {data-background="Gfx/notas.png"}  

<aside class="notes">

En el mejor de los casos a una notable preparación y preparación de su espacio.
Tomando notas y preparándose para las evaluaciones.

</aside>

## {data-background="Gfx/copiando-online.jpg"}

<aside class="notes">

Al parecer los estudiantes han mejorado sus habilidades de multitarea y desarrollaron 
el trabajo en equipo. Lo que es bueno, pero en las evaluaciones, en ocasiones
se necesita que el estudiante demuestre que ha desarrollado sus destrezas y aprendizajes.

</aside>

## {data-background="Gfx/dos_computadoras.jpg"}

<aside class="notes">

También esta el caso en que utilizaban dos computaodras para ayudarse a resolver o contactar a otro compañero o ayudante.

</aside>

## {data-background="Gfx/ayuda_amigo.jpg"}

<aside class="notes">

En algunos casos se realiza trabajo colaborativo cuando no esta del todo pedido.
o se solicita ayuda de alguna persona que domina los temas a tratar. En el caso de escolares han comentado que los padres ayudan a los hijos en las soluciones.

</aside>

## {data-background="Gfx/chat_online.png"}

<aside class="notes">

Una práctica frecuente ha sido el uso de redes sociales para comunicarse e intercambiar respuesta o información y estrategias de solución. Mediante el chat, audio llamadas y video llamadas en algunos casos conferencias en línea.

</aside>

## {data-background="Gfx/copia-celular.jpg"}

<aside class="notes">

Enviar fotografías de las soluciones por redes sociales o correo electrónico a tabletas y celulares también es una práctica frecuente para llegar a soluciones en exámenes.

</aside>

# ¿Que alternativas tecnológicas se tiene para disminuir y disuadir a los estudiantes al fraude?

---

1. Facilidades de los LMS
2. Aplicaciones de seguridad
3. Sistemas de supervisión en línea
4. Otras herramientas sugeridas


# 1. Facilidades de los LMS

<aside class="notes">

- Un LMS, Learning Managment System (Sistema de Gestión de Aprendizajes).
- Posen módulos para evaluaciones realización de ejercicios.
- Estos brindan algunas facilidades para evitar el fraude y copia.

</aside>

## {data-background="Gfx/lms-logos.png"}

<aside class="notes">

Aquí presentamos los más conocidos, hay una gran variedad de LMS corporativos con servicio de tipo SAAS.

</aside>

## Posibilidades de configuración

- Organizar la evaluación por secciones con tiempos predeterminados
- Controla el tiempo por ejercicio o pregunta de una evaluación
- Presentar de forma aleatoria las preguntas y alternativas de respuestas
- Presentar las preguntas una a una o por grupos
- Solo ir en una dirección o permitir avanzar y retroceder

<aside class="notes">

- Tener en consideración que desde el punto de vista de la evaluación, puede afectar la validez.
- Por ejemplo, si el patrón de preguntas que se presenta es en un orden perjudicial para el evaluado.
- El orden puede llevarlo a perder mucho tiempo en alguna pregunta y perjudicar.

</aside>

## Recomendaciones para Moodle 1 - PAIDEIA 

![Configuración-moodle-1](./Gfx/moodle1.png)

<aside class="notes">

- Tener control del tiempo de tal manera que este sea los suficiente, ni más ni menos. Aquí se necesita recurrir a la experiencia del profesor.
- Ofrecer solo un intento para la prueba.

</aside>

## Recomendaciones para Moodle 2 - PAIDEIA

![Configuración-moodle-2](./Gfx/moodle2.png)

<aside class="notes">

- Una pregunta por página complica la posibilidad de cooperación en línea.
- Si son de respuestas múltiples, utilizar las respuestas en orden aleatorio.

</aside>


## Recomendaciones para Moodle 3 - PAIDEIA

![Configuración-moodle-3](./Gfx/moodle3.png)

![Configuración-moodle-4](./Gfx/moodle4.png)

<aside class="notes">

- Solo se accede durante un espacio de tiempo determinado.
- Utilizar el orden aletorio al presentar las respuestas.
- Se puede observar como las preguntas se presentan en una página cada una.

</aside>

## Ejemplo de configuración Chamilo LMS

![Configuración-chamilo](./Gfx/chamilo1.png)

## Ejemplo de configuración FastTest Web

![Configuración-fasttest](./Gfx/fasttest1.png)

# 2. Aplicaciones de seguridad

## Navegadores seguros

<small style="text-align: left;">
Son navegadores que toman el control de la computadora y no permiten el acceso a otros programas,
solo a los permitidos a través de la configuración. No permite cambiar de ventana o ingresar a otras pestañas. Controlan el uso de varias pantallas. No permiten el acceso a través de máquinas virtuales.
</small>

- Safe Exam Browser SEB <br> [https://safeexambrowser.org](https://safeexambrowser.org)
- Respondus LockDown Browser <br> [https://web.respondus.com/he/lockdownbrowser/](https://web.respondus.com/he/lockdownbrowser/)

<aside class="notes">

Estas aplicaciones son totalmente configurables. Vuelven la computadora un kiosco. Como los cajeros automáticos.
Solo se accede a los que esta permitido. Desde la versión de Moodle 3.8 existe una extensión de integración del
SEB. A partir de la versión 3.9 ya se incorpora la funcionalidad al core del software.

</aside>

## SEB y Moodle - PAIDEA 1

![Safe Exam Browse 1](./Gfx/seb1.png)
<aside class="notes">

- Como se comento desde la versión de moodle 3.9 se incorporó al core. Y para versiones previas por módulo o extensión.
- Permite la configuración del SEB desde Moodle o a través de un archivo de configuración preparado con la utilidad del SEB.

</aside>

## SEB y Moodle - PAIDEA 2

![Safe Exam Browse 2](./Gfx/seb2.png)

<aside class="notes">

- El SEB a la hora de que el evaluado inicia la prueba le pide descargarlo para instalación.
- Si ya lo tienen solo tiene que 'Invocar o ejecutar el software para iniciar la prueba.
- O un archivo de configuración preparado con la utilidad del SEB.

</aside>

## SEB Configuración

![Safe Exam Browse 3](./Gfx/seb0.png)

## SEB y una evaluación PAIDEIA

![Safe Exam Browse 4](./Gfx/seb3.png)

<aside class="notes">

- El SEB toma completamente el control y solo permite los porgrmas autorizados.
- se muestra la información relevante y algunas ayudas como herramienta de sonido, bateria, reloj, recargar
zoom.

</aside>

## Respondus Lockdown Browser 1

![Respondus 1](./Gfx/respondous2.png)
<aside class="notes">

- La pantalla de carga de Respondus
- Se integra desde un módulo a Moodle - PAIDEIA
- Es de pago como se puede notar en su web.

</aside>

## Respondus Lockdown Browser 2

![Respondus 2](./Gfx/respondous1.png)

<aside class="notes">

- Este es un modelo de examen PAIDEIA  en Respondus
- De igual forma el módulo al integrarse a Moodle presenta opciones de configuración.
- Como ven solo se muestra el navegador. Nada de barra de direcciones o lanzador de Windows.
- No permite copiar, cambiar de pantalla, imprimir, agrega la calculadora.
- SEB permite mayor configuración.

</aside>

# 3. Sistemas de supervisión en línea

## {data-background="Gfx/proctor-logos.png"}

## Modalidades de supervisión

>  A. Supervisión automatizada con IA <br>
>  B. Supervisor en vivo <br>
>  C. Mixta con IA y supervisor persona <br>

<aside class="notes">

- Se integran a plataforma de evaluación por pluginss
- Tiene integración por extensiones con los principales LMS. LTI - Learning Tools Interoperability
- Moodle, Canvas, Blackboard, Sakai, Chamilo.
- Ultima investigación los costos pueden variar de 4 hasta 12 dólares por evaluado.

</aside>

## A. Supervisión automartizada con IA

- Acceso biométrico
- Grabación de audio y video (cámara y/o escritorio)
- Identificación de incidencias con IA
- Aplicaciones lockdown (aislamiento)

<aside class="notes">

</aside>

## Registro y acceso 1

![Acceso biométrico](./Gfx/pt_registro.png)

<aside class="notes">

- Este es el servicio que utiliza el CMEC. Proctortrack.
- Registro de identidad y prueba de sistemas. Evaluación.
- Registro se genera un ID virtual para próximas fechas. Vigencia un año.
- Se instala una app que hace de Lockdown a la vez que gestiona el servicio de vigilancia.

</aside>

## Registro y acceso 2

![Celular PT](./Gfx/pt_cel1.png)
![Celular ambiente](./Gfx/pt_cel2.png)

<aside class="notes">

- La vigilancia puede complementarse con el celular.
- La plataforma orienta y conedta el celular a partir de un código QR.
- Para los selfies de identificación y para el roomscan.

</aside>

## Registro y acceso 3

![Celular PT](./Gfx/pt_cel3.png)

<aside class="notes">

- El celular puede utilizarse como una segunda cámara.
- Para escanear hojas que se usen durante el examen
- La app del celular orienta en esto.

</aside>



## Supervisión automatizada IA 1

![Panel PT 1](./Gfx/pt_panel1.png)
<aside class="notes">

- Puede verse el panel de revisión de supervisión.
- Los estudiantes con su registro de incidencias de haberlas.
- El CMEC no utiliza Live Proctoring, preferimos el IA.

</aside>

## Supervisión automatizada IA 2

![Panel PT 1](./Gfx/pt_panel2.png)
<aside class="notes">

- Panel de revisión, linea de tiempo audio y velocidad de reproducción.
- Se muestra el navegador de incidencias, flechas derecha.
- Video y audio de toda la sesión.
- Si se pierde la conexión por un momento el software guarda localmente.

</aside>

## Supervisión automatizada IA 3

![Panel PT 1](./Gfx/pt_panel3.png)

<aside class="notes">

- Se marcan las capturas de infracciones.
- Algunos son falsos positivos. Ejemplo Gmail o correo web.
- Capturas cada 20 segundo de escritorio o incidencia.
- Notas del validador.

</aside>


## Verificaciones de identidad 1

![Identidad 1](./Gfx/pt_onboard0.png)

<aside class="notes">

- Registro de identidad para comparar
- ID aprobado.

</aside>

## Verificaciones de identidad 2

![Identidad 1](./Gfx/pt_onboard1.png)

<aside class="notes">

- Comparación con el nuevo registro del validado 
- Difuminado por seguridad. Obtenidos con el app para celular.

</aside>

## Verificaciones de identidad 3

![Identidad 1](./Gfx/pt_roomscan.webm)

<aside class="notes">

- Ejemplo de el scan de una habitación 
- Se pide que se vea por todos lados de la computadora.
- Fraude con spliters de video.

</aside>


## Otros servicios - Examus 1

![Examus](./Gfx/examus1.png)

<aside class="notes">

- Servicio que se va a utilizar en admisión.
- Se graba completamente el video y escritorio.
- Linea de incidencias en video y en barra lateral.
- Tiene servicio live.

</aside>

## Otros servicios - Examus 2

![Examus](./Gfx/examus2.png)

<aside class="notes">

- No encontre uno de 6.
- Se puede realizar varios al mismo tiempo
- Hasta los que quiera pero degrada el funcionamiento del PC
- Para varios stream se necesitaría ancho de banda del vigilante- profesor.

</aside>

## Otros servicios - Mettl 1

![Mettl 1](./Gfx/mettl1.png)
<aside class="notes">

- Servicio que se utilizó en admisión
- Fotogramas cada cierto 20 segundo
- Comunicación con chat individual

</aside>

## Otros servicios - Mettl 2

![Mettl 1](./Gfx/mettl2.png)
<aside class="notes">

- Permitía revisar el video con una linea de tiempo
- Fotogramas de 20 segundo
- Smowl, Sumadi. trabajan con fotogramas.

</aside>

## Otros servicios - ProctorExam

![ProtorExam](./Gfx/proctor_exam.jpg)
<aside class="notes">

- Este es el ejemplo de live proctoring de proctor-exam
- Como ven los servicios son similares y difieren en algunas características.
- La mayoría se integra a plataformas de evaluación y LMS.

</aside>

## Otros servicios - Respondus Monitor

![Respondus Monitor](./Gfx/respondusmonitor1.png)
<aside class="notes">

- Respondus el del lock down browser también tiene su servicio de proctoring.

</aside>

## Otros servicios - Moodle proctoring

[Ver la web](https://moodle.org/plugins/quizaccess_proctoring)

![Moodle-proctoring](./Gfx/moodleproctor2.png)

# 4. Otras herramientas sugeridas

## SEB y Zoom/Meet

![Vigilancia Zoom](./Gfx/zoom0.png)
<aside class="notes">

- Por zoom cada estudiante puede tener dos dipositivos (PC y Celular). Lo que lleva que uno pueda ser la cámara y otro lateral o grabando el compuitador.
- Puede combinarse con SEB para bloquear la computadora, solo se permite Zoom.
- En modo galería se puede ir vigilando a los estudiantes.
- Se puede permitir de igual forma una sesión de meet. Meet permite el ingreso invitados o a los que tienen el enlace.

</aside>

## Google Classroom 1

![Tareas 1](./Gfx/classroom1.png)
<aside class="notes">

- Classroom que viene con el Google Workspace (antes suite) permite programar tareas.
- Con plantilla previas que se crean para cada evaluado. Por ejemplo la hoja de examen.

</aside>

## Google Classroom 2

![Tarea alumno](./Gfx/classroom2.png)
<aside class="notes">

- Cada estudiante recibe una hoja de examen y puede resuelve su práctica allí
- Y luego entregarla para calificación con la misma plataforma.
- Se puede añadir cuestionario y otros contenidos.

</aside>

## Google Classroom 3

![Versiones documentos](./Gfx/classroom3.png)
<aside class="notes">

- Una caracterśitca de los documentos de google es que realizan el tracking de cambios
- Además se ha integrado la comparación de documentos
- Existen extensiones para plagio de artículos.
- Se puede ver los tiempo, va grabando cada cierto tiempo. Seguimiento de solución o respuesta.

</aside>

## Github Classroom 1

![Tareas](./Gfx/github1.png)
<aside class="notes">

- Este es un servicio similar y abierto a uso de Github
- Se orienta más a programación y desarrollo de software
- Se necesita aprender git o utilizar github.

</aside>

## Github Classroom 2

![Tareas](./Gfx/github2.png)

<aside class="notes">

- Al igual que google genera espacios individuales para el trabajo.
- El profesor tiene un interface de calificación.

</aside>

# Reflexiones finales

- La importancia de la evaluación
- Se cuenta con herramientas PUCP
- Herramientas externas que pueden complementar

<aside class="notes">

- Controlar el tiempo de evaluación.
- Tiempos por pregunta.
- Preguntas complejas en varias preguntas cortas
- Apoyarse de herramientas PUCP y herramientas externas.
- Abundancia de información. Tiempos por preguntas videos y audio.
- Análisis de datos. Se genera mucho dato.
- Sustentar la respuesta por video (youtube) y subir el enlace.
- Otros formatos de preguntas. Formas de preguntas.
- Canal de Telegram con alumnos.
- Preguntas asesoría y otros.

</aside>

# ¿Preguntas?

# GRACIAS

alberto.torreblanca@pucp.edu.pe
https://t.me/AlbertoTorreblanca

---

<h1>Examus DEMO</h1>

[Ir al DEMO con Examus](https://lms.demo.examus.net/start-demo/)