llm-rag-eval

Evaluator yang didukung Model Bahasa Besar untuk pipeline RAG.

Fungsinya

Framework ini menyediakan framework berbasis LLM untuk mengevaluasi performa sistem RAG menggunakan serangkaian metrik yang dioptimalkan untuk domain aplikasi tempat sistem RAG beroperasi. Kami telah menggunakan Gemini Pro 1.0 dari Google AI sebagai LLM yang digunakan framework. Kami juga telah menggunakan model penyematan Google AI untuk membuat penyematan bagi beberapa metrik.

Dibuat dengan

  • Tidak ada

Tim

Oleh

llm-rag-eval

From

Amerika Serikat