VivaEval

用途

VivaEval 旨在改善國中和高中老師的生活。這項工具會自動執行測試和評估程序，並使用一種不會輕易遭到現成 LLM 洩漏的測試 / 指派。這麼一來，老師就能每週節省 5 到 10 小時的時間。
測驗開始後，VivaEval 會向學生 (或使用者) 提出問題，並等待回覆。此時，應用程式會使用 Gemini 1.5 Pro 執行下列操作：
1. 建立音訊輸入內容的轉錄稿。(我沒有直接使用音訊輸入內容，因為透過文字追蹤整段對話會更容易/快速)。
2. 進行健全性檢查，確保使用者不會嘗試存取提示或說出無關的內容。3. 根據目前的對話內容和老師提供的測試大綱，回應使用者輸入的內容。
系統會將回應合成為音訊檔案。使用者回答完所有問題後，系統會提示他們按下「End Conversation」。此時，應用程式會向 Gemini 1.5 Pro API 發出 1 或 2 次呼叫，以便：1. 查看對話內容轉錄稿和評分標準，並為每個問題應涵蓋的每個要點分配分數。然後將結果編譯為 JSON。
2. 在某些情況下，先前建立的「json」無法「解析」，因此應用程式會要求 Gemini 修正 json 結構。
未來，我打算在 VivaEval 中加入音訊和視訊分析功能，進一步提升學術誠信。