VivaEval

यह क्या करता है

VivaEval को मिडल और हाई स्कूल के शिक्षकों की ज़िंदगी को बेहतर बनाने के लिए डिज़ाइन किया गया है. यह टेस्टिंग और आकलन की प्रोसेस को अपने-आप पूरा करता है. इसके लिए, यह एक तरह का टेस्ट / असाइनमेंट इस्तेमाल करता है. इस टेस्ट / असाइनमेंट को आसानी से उपलब्ध एलएलएम से आसानी से समझा नहीं जा सकता. इससे हमारे शिक्षकों को हर हफ़्ते 5 से 10 घंटे का समय बचेगा.
टेस्ट शुरू होने पर, VivaEval छात्र (या उपयोगकर्ता) से कोई सवाल पूछता है और जवाब का इंतज़ार करता है. फ़िलहाल, ऐप्लिकेशन Gemini 1.5 Pro का इस्तेमाल इन कामों के लिए करता है:
1. ऑडियो इनपुट की ट्रांसक्रिप्ट बनाएं. (मैंने सीधे ऑडियो इनपुट का इस्तेमाल नहीं किया, क्योंकि टेक्स्ट के ज़रिए पूरी बातचीत पर नज़र रखना आसान/तेज़ होता है).
2. यह पक्का करने के लिए जांच करें कि उपयोगकर्ता प्रॉम्प्ट को ऐक्सेस न कर रहा हो या कुछ गलत न बोल रहा हो. 3. उपयोगकर्ता के इनपुट के आधार पर जवाब दें. इसके लिए, अब तक की बातचीत और शिक्षक की दी गई टेस्ट की खास जानकारी को ध्यान में रखें.
इसके बाद, जवाब को ऑडियो फ़ाइल में बदल दिया जाता है. जब उपयोगकर्ता सभी सवालों के जवाब दे देता है, तो उसे “बातचीत खत्म करें” पर क्लिक करने के लिए कहा जाता है. इस दौरान, ऐप्लिकेशन में Gemini 1.5 Pro API को एक या दो कॉल किए जाते हैं, ताकि: 1. बातचीत की ट्रांसक्रिप्ट और ग्रेडिंग रूब्रिक देखें. साथ ही, हर सवाल में शामिल किए जाने वाले हर पॉइंट के लिए स्कोर असाइन करें. इसके बाद, नतीजों को json में कंपाइल करें.
2. कुछ मामलों में, पिछले पॉइंट में बनाया गया 'json' 'पार्स नहीं किया जा सकता'. इसलिए, ऐप्लिकेशन Gemini से json स्ट्रक्चर को ठीक करने के लिए कहता है.
आने वाले समय में, मैं VivaEval में ऑडियो और वीडियो का विश्लेषण शामिल करने की योजना बना रहा हूं, ताकि अकादमिक ईमानदारी को और बेहतर बनाया जा सके.