llm-rag-eval

RAG 파이프라인을 위한 대규모 언어 모델 기반 평가 도구입니다.

기능

RAG 시스템이 작동하는 애플리케이션 도메인에 최적화된 일련의 측정항목을 사용하여 RAG 시스템의 성능을 평가하는 LLM 기반 프레임워크를 제공합니다. 프레임워크에서 사용하는 LLM로 Google AI의 Gemini Pro 1.0을 사용했습니다. 또한 Google AI 임베딩 모델을 사용하여 일부 측정항목의 임베딩을 생성했습니다.

구성용 제품

  • 없음

작성자:

llm-rag-eval

From

미국