VivaEval

Ý nghĩa

VivaEval được thiết kế để cải thiện cuộc sống của giáo viên trung học cơ sở và trung học phổ thông. Công cụ này tự động hoá quy trình kiểm thử và đánh giá bằng một loại bài kiểm thử / bài tập mà các LLM hiện có không thể dễ dàng xâm phạm. Điều này sẽ giúp các giáo viên làm việc quá sức tiết kiệm được 5 đến 10 giờ mỗi tuần.
Khi bài kiểm tra bắt đầu, VivaEval sẽ đặt câu hỏi cho học sinh (hoặc người dùng) và chờ câu trả lời. Tại thời điểm này, ứng dụng sử dụng Gemini 1.5 Pro để:
1. Tạo bản chép lời của âm thanh đầu vào. (Tôi không trực tiếp sử dụng tính năng nhập âm thanh vì việc theo dõi toàn bộ cuộc trò chuyện qua văn bản sẽ dễ dàng/nhanh hơn).
2. Kiểm tra tính hợp lệ để đảm bảo rằng người dùng không cố gắng truy cập vào lời nhắc hoặc nói điều gì đó không liên quan. 3. Đưa ra câu trả lời cho nội dung mà người dùng nhập; xem xét cuộc trò chuyện cho đến thời điểm hiện tại và dàn ý kiểm tra do giáo viên đưa ra.
Sau đó, câu trả lời được tổng hợp thành tệp âm thanh. Khi người dùng trả lời xong tất cả các câu hỏi, họ sẽ được nhắc nhấn vào "Kết thúc cuộc trò chuyện". Tại thời điểm này, ứng dụng có 1 hoặc 2 lệnh gọi đến API Gemini 1.5 Pro để: 1. Xem bản chép lời cuộc trò chuyện và thang điểm; đồng thời chỉ định điểm cho từng điểm cần được đề cập trong mỗi câu hỏi. Sau đó, biên dịch kết quả vào một json.
2. Trong một số trường hợp, "json" được tạo ở điểm trước không "phân tích cú pháp" được; do đó, ứng dụng yêu cầu Gemini sửa cấu trúc json.
Trong tương lai, tôi dự định kết hợp tính năng phân tích âm thanh và video vào VivaEval để tăng cường tính liêm chính trong học thuật.