llm-rag-eval

Działanie

Zapewnia ono platformę opartą na LLM do oceny skuteczności systemów RAG za pomocą zestawu danych, które są optymalizowane pod kątem domeny aplikacji, w której działa system RAG. Jako frameworka LLM użyto Gemini Pro 1.0 od Google AI. Użyliśmy też modelu sztucznej inteligencji Google do wygenerowania wektorów wstępujących dla niektórych danych.