VivaEval

O que faz?

O VivaEval foi criado para melhorar a vida de professores do ensino fundamental e médio. Ele automatiza o processo de teste e avaliação com um tipo de teste / tarefa que não pode ser facilmente comprometido por LLMs prontamente disponíveis. Isso economiza de cinco a dez horas por semana para nossos professores sobrecarregados.
Quando o teste começa, o VivaEval faz uma pergunta ao aluno (ou usuário) e aguarda uma resposta. Nesse ponto, o app usa o Gemini 1.5 Pro para:
1. Crie a transcrição da entrada de áudio. (Não usei a entrada de áudio diretamente, porque é mais fácil/rápido acompanhar toda a conversa por texto).
2. Faça uma verificação de sanidade para garantir que o usuário não esteja tentando acessar o comando ou dizer algo irrelevante. 3. Ela deve apresentar uma resposta à entrada do usuário, considerando a conversa até o momento e o esboço do teste fornecido pelo professor.
A resposta é sintetizada em um arquivo de áudio. Quando o usuário termina de responder a todas as perguntas, ele é solicitado a clicar em "Encerrar conversa". Nesse ponto, o app tem uma ou duas chamadas para a API Gemini 1.5 Pro para: 1. Analise a transcrição da conversa e a rubrica de avaliação e atribua uma pontuação para cada ponto que deveria ser abordado em cada pergunta. Em seguida, compile os resultados em um json.
2. Em algumas ocasiões, o "json" criado no ponto anterior não é "analisável". Por isso, o app pede ao Gemini para corrigir a estrutura json.
No futuro, pretendo incorporar a análise de áudio e vídeo ao VivaEval para melhorar ainda mais a integridade acadêmica.