Promptfooの代替
#1
Ragas
Ragasは、検索拡張生成(RAG)パイプライン向けのオープンソースの評価フレームワークです。忠実性、回答の関連性、コンテキストの精度といった指標を備え、正解ラベルがなくても使えます。
#2
Giskard
AIモデルのテストと脆弱性スキャンのフレームワーク
#3
Patronus AI
LLMアプリ向けのAI評価・安全性テストプラットフォーム
#4
Langfuse
オープンソースのLLM可観測性・トレーシングプラットフォーム
#5
Braintrust
本番システム向けのAI可観測性と評価のプラットフォーム
#6
Lakera
LLMアプリケーションを攻撃から守るAIセキュリティプラットフォーム
#7
Evidently AI
オープンソースのMLモデル監視と評価のフレームワーク