llm-rag-eval
RAG ardışık düzenleri için büyük dil modeli destekli değerlendirici.
Ne işe yarar?
RAG sistemlerinin performansını, çalıştığı uygulama alanı (RAG sistemi) için optimize edilmiş bir dizi metrik kullanarak değerlendirmek üzere LLM tabanlı bir çerçeve sağlar. Çerçevenin kullandığı LLM olarak Google AI'ın Gemini Pro 1.0 sürümünü kullandık. Bazı metrikler için embeddings oluşturmak amacıyla Google Yapay Zeka embedding modelini de kullandık.
Aşağıdakilerle tasarlandı:
- Yok
Takım
Değişikliği yapan
llm-rag-eval
Nereden
Amerika Birleşik Devletleri