VivaEval

Ne işe yarar?

VivaEval, ortaokul ve lise öğretmenlerinin yaşamlarını iyileştirmek için tasarlanmıştır. Hazır LLM'ler tarafından kolayca güvenliği ihlal edilemeyen bir test / atama türüyle test ve değerlendirme sürecini otomatikleştirir. Bu sayede, çok çalışan öğretmenlerimize haftada 5-10 saat kazandırmış oluruz.
Sınav başladığında VivaEval öğrenciye (veya kullanıcıya) bir soru sorar ve yanıt bekler. Bu noktada uygulama, Gemini 1.5 Pro'yu kullanarak:
1. Ses girişinin transkriptini oluşturun. (Görüşmenin tamamını metin üzerinden takip etmek daha kolay/hızlı olduğu için doğrudan ses girişini kullanmadım).
2. Kullanıcının istemlere erişmeye çalışmadığından veya alakasız bir şey söylemediğinden emin olmak için mantık kontrolü yapın. 3. Kullanıcının girişine yanıt oluşturun. Bu yanıtta, şimdiye kadarki görüşme ve öğretmen tarafından verilen test özeti dikkate alınır.
Ardından yanıt, ses dosyası olarak sentezlenir. Kullanıcı tüm soruları yanıtladığında "Sohbeti sonlandır"ı tıklaması istenir. Bu noktada uygulama, Gemini 1.5 Pro API'ye 1 veya 2 çağrı yapar: 1. Görüşmenin transkriptini ve notlandırma ölçütlerini inceleyin ve her soruda ele alınması gereken her nokta için bir puan atayın. Ardından sonuçları bir JSON dosyasında derleyin.
2. Bazı durumlarda, önceki noktada oluşturulan "json" "ayrıştırılamaz". Bu nedenle uygulama, Gemini'den json yapısını düzeltmesini ister.
İleride, akademik dürüstlüğü daha da artırmak için VivaEval'e ses ve video analizi eklemeyi planlıyorum.