VivaEval

作用

VivaEval 旨在改善初中和高中教师的生活。它通过一种测试 / 作业（无法轻易被现成的 LLM 破解）自动执行测试和评估流程。这应该能让超负荷工作的教师每周节省 5-10 小时的时间。
测试开始后，VivaEval 会向学生（或用户）提出问题，并等待回答。此时，应用会使用 Gemini 1.5 Pro 执行以下操作：
1. 创建音频输入的转写内容。（我没有直接使用音频输入，因为通过文本跟踪整个对话更容易/更快）。
2. 进行完整性检查，确保用户没有尝试访问提示或说出不相关的内容。3. 考虑到目前的对话内容和老师提供的测试大纲，为用户的输入构想出回答。
然后，系统会将回答合成为音频文件。当用户回答完所有问题后，系统会提示他们点击“结束对话”。此时，应用会对 Gemini 1.5 Pro API 进行 1 到 2 次调用，以执行以下操作：1. 仔细阅读对话转写和评分标准；并为每个问题中应涵盖的每个要点分配分数。然后将结果编译为 JSON。
2. 在某些情况下，上一点中创建的“json”无法“解析”；因此，应用会要求 Gemini 更正 json 结构。
今后，我计划将音频和视频分析纳入 VivaEval，以进一步提高学术诚信度。