RAGAS
Mer info
- Skapad av
- Exploding Gradients (Shahul Es, Jithin James)
- År
- Typ
- Evaluation framework för RAG
- Licens
- Apache 2.0
- Källkod
- github.com/explodinggradients/ragas
Mest populära open source-eval-frameworket för RAG — metrik som faithfulness, answer relevancy, context recall, context precision.
Automatiserar evaluation utan ground truth (de flesta metrik kräver bara query + retrieved contexts + generated answer). Använder LLM-as-judge under huven. Standardvalet för "vi vill testa vår RAG men har inget annoteringsteam". Konkurrenter: DeepEval (samma idé, fler use-cases), TruLens (TruEra), LlamaIndex-evals, OpenAI Evals.