llm-rag-eval

Оценщик на основе большой языковой модели для конвейеров RAG.

Что он делает

Он предоставляет фреймворк на основе LLM для оценки производительности систем RAG с использованием набора метрик, оптимизированных для области применения, в которой она (система RAG) работает. Мы использовали Gemini Pro 1.0 от Google AI в качестве LLM, используемого фреймворком. Мы также использовали модель встраивания Google AI для генерации встраиваний для некоторых метрик.

Построено с

  • Никто

Команда

К

llm-rag-eval

От

Соединенные Штаты