VivaEval

Qué hace

VivaEval está diseñado para mejorar la vida de los profesores de instituciones educativas de nivel medio y secundario. Automatiza el proceso de prueba y evaluación con un tipo de prueba o tarea que no se puede vulnerar fácilmente con LLMs disponibles. Esto debería ahorrarles a nuestros profesores sobrecargados de trabajo entre 5 y 10 horas por semana.
Cuando comienza la prueba, VivaEval le hace una pregunta al estudiante (o usuario) y espera una respuesta. En este punto, la app usa Gemini 1.5 Pro para lo siguiente:
1. Crea la transcripción de la entrada de audio. (No usé la entrada de audio directamente, ya que es más fácil y rápido hacer un seguimiento de toda la conversación por escrito).
2. Realiza una verificación de coherencia para asegurarte de que el usuario no intente acceder a la instrucción ni decir algo irrelevante. 3. Crea una respuesta a la entrada del usuario, teniendo en cuenta la conversación hasta el momento y el esquema de la prueba que proporcionó el profesor.
Luego, la respuesta se sintetiza en un archivo de audio. Cuando el usuario termina de responder todas las preguntas, se le solicita que presione "Finalizar conversación". En este punto, la app tiene 1 o 2 llamadas a la API de Gemini 1.5 Pro para lo siguiente: 1. Revisa la transcripción de la conversación y la rúbrica de calificación, y asigna una puntuación a cada punto que se debía abordar en cada pregunta. Luego, compila los resultados en un archivo JSON.
2. En algunas ocasiones, el “json” creado en el punto anterior no se puede “analizar”, por lo que la app le pide a Gemini que corrija la estructura JSON.
En el futuro, planeo incorporar el análisis de audio y video en VivaEval para mejorar aún más la integridad académica.