Promptfoo は、ローカル中心の評価とレッドチーム検証フレームワークです。CLI と Node.js ライブラリから、テスト行列、検証条件、回帰チェック、脆弱性の検査をローカルや CI で実行できます。チーム向けの任意のホスト型サービスもあります。
適したエージェント機能
役立つエージェントのタスク
概要
ウェブサイトwww.promptfoo.dev
認証なし
料金無料枠あり・$0
SDKstypescript
OpenAPIいいえ
MCP 対応いいえ
Promptfoo を使う場面
Promptfoo は、可観測性, 監視, 認証のワークフロー向けに掲載されています。 Promptfoo は、ローカル中心の評価とレッドチーム検証フレームワークです。CLI と Node.js ライブラリから、テスト行列、検証条件、回帰チェック、脆弱性の検査をローカルや CI で実行できます。チーム向けの任意のホスト型サービスもあります。 アプリ内で独自のインフラを維持する代わりに、文書化されたサービスの境界を通じてこの機能が必要な場合に検討できます。
4agent のタスクモデルでは、この製品は次の機能に対応します:可観測性と評価, 認証とシークレット。 そのため、次のタスクの候補となります:ウェブを調査する, ソフトウェアを開発・デプロイする, メモリと知識を管理する, 業務フローを自動化する。
連携チェックリスト
- アクセス: なし の認証フロー、資格情報の範囲と更新手順、ユーザーやサービス ID ごとの呼び出し追跡を確認してください。
- クライアント対応: typescript 向けの公式または文書化されたクライアントが掲載されています。
- 自動化: OpenAPI:現時点で記録なし、MCP:現時点で記録なし、CLI:利用可能として掲載。各要件を提供元の最新文書で確認してください。
- 運用: 本番に近い利用量でレート制限、タイムアウト、再試行、エラー、ログ、データ保持、現在の無料枠と有料枠の料金を確認してください。
情報源と検証
実装や購入の判断前に、一次資料で最新の動作を確認してください。機能、制限、価格は掲載確認後に変わる場合があります。