llm-rag-eval
Évaluateur basé sur un grand modèle de langage pour les pipelines RAG.
Description
Il fournit un framework basé sur LLM pour évaluer les performances des systèmes RAG à l'aide d'un ensemble de métriques optimisées pour le domaine d'application dans lequel il (le système RAG) opère. Nous avons utilisé Gemini Pro 1.0 de Google AI comme LLM utilisé par le framework. Nous avons également utilisé le modèle d'embedding de l'IA de Google pour générer des représentations vectorielles continues pour certaines des métriques.
Conçu avec
- Aucun
Équipe
Par
llm-rag-eval
De
États-Unis