VivaEval

Description

VivaEval est conçu pour améliorer la vie des enseignants du collège et du lycée. Il automatise le processus de test et d'évaluation à l'aide d'un type de test / de devoir qui ne peut pas être facilement compromis par les LLM facilement disponibles. Cela devrait permettre à nos enseignants surmenés de gagner entre cinq et dix heures par semaine.
Au début du test, VivaEval pose une question à l'élève (ou à l'utilisateur) et attend une réponse. À ce stade, l'application utilise Gemini 1.5 Pro pour:
1. Créez la transcription de l'entrée audio. (Je n'ai pas utilisé directement l'entrée audio, car il est plus facile/rapide de suivre l'intégralité de la conversation par écrit.)
2. Effectuez une vérification de cohérence pour vous assurer que l'utilisateur ne tente pas d'accéder à l'invite ni de dire quelque chose d'irrelevant. 3. Proposez une réponse à l'entrée de l'utilisateur en tenant compte de la conversation jusqu'à présent et du plan du test donné par l'enseignant.
La réponse est ensuite synthétisée en fichier audio. Lorsque l'utilisateur a répondu à toutes les questions, il est invité à appuyer sur "Mettre fin à la conversation". À ce stade, l'application effectue un ou deux appels à l'API Gemini 1.5 Pro pour: 1. Passez en revue la transcription de la conversation et la grille de notation, puis attribuez un score à chaque point qui devait être abordé dans chaque question. Compilez ensuite les résultats dans un fichier JSON.
2. Parfois, le fichier JSON créé au point précédent n'est pas "analysable". L'application demande donc à Gemini de corriger la structure JSON.
À l'avenir, je prévois d'intégrer l'analyse audio et vidéo à VivaEval pour renforcer encore l'intégrité académique.