llm-rag-eval
Valutatore basato su modelli linguistici di grandi dimensioni per le pipeline RAG.
Descrizione
Fornisce un framework basato su LLM per valutare le prestazioni dei sistemi RAG utilizzando un insieme di metriche ottimizzate per il dominio dell'applicazione in cui opera il sistema RAG. Abbiamo utilizzato Gemini Pro 1.0 di Google AI come LLM utilizzato dal framework. Abbiamo anche utilizzato il modello di embedding dell'IA di Google per generare gli embedding per alcune delle metriche.
Realizzato con
- Nessuna
Team
Di
llm-rag-eval
Da
Stati Uniti