RAGAS
Mehr Infos
- Erstellt von
- Exploding Gradients (Shahul Es, Jithin James)
- Veröffentlicht
- Typ
- Evaluation-Framework für RAG
- Lizenz
- Apache 2.0
- Quellcode
- github.com/explodinggradients/ragas
Das populärste Open-Source-Eval-Framework für RAG — mit Metriken wie faithfulness, answer relevancy, context recall, context precision.
Automatisiert die Evaluation ohne Ground Truth (die meisten Metriken brauchen nur Query + abgerufene Kontexte + generierte Antwort). Nutzt unter der Haube LLM-as-judge. Die Standardwahl für "wir wollen unsere RAG testen, haben aber kein Annotationsteam". Konkurrenz: DeepEval (gleiche Idee, mehr Use-Cases), TruLens (TruEra), LlamaIndex-Evals, OpenAI Evals.