VivaEval

การทำงาน

VivaEval ออกแบบมาเพื่อปรับปรุงชีวิตของครูระดับมัธยมศึกษาตอนต้นและมัธยมศึกษาตอนปลาย ซึ่งจะทําให้การทดสอบและการประเมินเป็นแบบอัตโนมัติด้วยประเภทการทดสอบ / งานที่ไม่อาจถูกบุกรุกได้โดย LLM ที่พร้อมใช้งาน ซึ่งจะช่วยประหยัดเวลาให้กับครูที่ทำงานหนักของเราได้ 5-10 ชั่วโมงต่อสัปดาห์
เมื่อเริ่มการทดสอบ VivaEval จะถามคำถามนักเรียน (หรือผู้ใช้) แล้วรอคำตอบ เมื่อถึงจุดนี้ แอปจะใช้ Gemini 1.5 Pro เพื่อดำเนินการต่อไปนี้
1. สร้างข้อความถอดเสียงของอินพุตเสียง (ฉันไม่ได้ใช้อินพุตเสียงโดยตรงเนื่องจากติดตามการสนทนาทั้งหมดผ่านข้อความได้ง่าย/เร็วกว่า)
2. ตรวจสอบความถูกต้องว่าผู้ใช้ไม่ได้พยายามเข้าถึงพรอมต์หรือพูดสิ่งที่ไม่เกี่ยวข้อง 3. คิดคำตอบสำหรับข้อมูลที่ผู้ใช้ป้อน โดยพิจารณาจากการสนทนาที่ผ่านมาและเค้าโครงแบบทดสอบที่ครูให้
จากนั้นระบบจะสังเคราะห์คำตอบเป็นไฟล์เสียง เมื่อตอบคำถามทั้งหมดแล้ว ระบบจะแจ้งให้ผู้ใช้กด "สิ้นสุดการสนทนา" เมื่อถึงจุดนี้ แอปจะเรียกใช้ Gemini 1.5 Pro API 1 หรือ 2 ครั้งเพื่อดำเนินการต่อไปนี้ 1. อ่านข้อความถอดเสียงของการสนทนาและเกณฑ์การให้คะแนน แล้วให้คะแนนสำหรับแต่ละประเด็นที่ควรครอบคลุมในคำถามแต่ละข้อ จากนั้นคอมไพล์ผลลัพธ์เป็น JSON
2. ในบางครั้ง "json" ที่สร้างขึ้นก่อนหน้านี้จะ "แยกวิเคราะห์ไม่ได้" แอปจึงขอให้ Gemini แก้ไขโครงสร้าง json
ในอนาคต เราวางแผนที่จะรวมการวิเคราะห์เสียงและวิดีโอไว้ใน VivaEval เพื่อส่งเสริมความซื่อสัตย์ทางวิชาการให้ดียิ่งขึ้น