llm-rag-eval

适用于 RAG 流水线的大语言模型评估器。

作用

它提供了一个基于 LLM 的框架,用于使用一组针对其(RAG 系统)所运行的应用领域进行了优化的指标来评估 RAG 系统的性能。我们使用了 Google AI 中的 Gemini Pro 1.0 作为该框架使用的 LLM。我们还使用 Google AI 嵌入模型为部分指标生成了嵌入。

可采用以下设备打造

团队

更新者

llm-rag-eval

发件人

美国