llm-rag-eval

এটা কি করে

এটি (RAG সিস্টেম) যে অ্যাপ্লিকেশন ডোমেনে কাজ করে তার জন্য অপ্টিমাইজ করা মেট্রিক্সের একটি সেট ব্যবহার করে RAG সিস্টেমের কর্মক্ষমতা মূল্যায়ন করার জন্য এটি একটি LLM ভিত্তিক ফ্রেমওয়ার্ক প্রদান করে। ফ্রেমওয়ার্ক যে LLM ব্যবহার করে আমরা Google AI থেকে Gemini Pro 1.0 ব্যবহার করেছি। আমরা কিছু মেট্রিক্সের জন্য এম্বেডিং তৈরি করতে Google AI এম্বেডিং মডেল ব্যবহার করেছি।