Promptfoo
PromptfooはLLMアプリのテスト、自動評価、レッドチーミングを行う開発運用ツール。安全性と品質の回帰確認を継続的に回しやすい。
分析・計測フリーミアム
Evalsレッドチームテスト自動化
最終確認日: 2026-03-10
料金情報
Community の無償利用から始められ、Enterprise で運用管理とガバナンスを拡張する。
どういう人が使うか
- 施策の成果をデータで判断したいWeb運用担当
- 改善サイクルを回すために計測を強化したいチーム
主な活用シーン
- プロンプト回帰テストの自動化
- 安全性シナリオのレッドチーム検証
- モデル切替時の出力比較
強み
- CI に組み込みやすいテスト志向
- セキュリティ検証の観点を入れやすい
導入時の注意点
- テストケース整備に初期工数がかかる
- 本番会話ログと切り分けた評価運用が必要