参考資料学習資料

TypeSafe Workflow Evals

開発者 TypeSafe AI

TypeSafe が公開する、構造化したワークフローと単一プロンプト方式の比較評価。

概要

実装の概要

評価サイトはハーネスとラベル付けの方法を説明し、4 つのワークフローについて精度、コスト、時間を表示します。セキュリティインシデント、エージェントのトレース、請求書、カスタマーサービスの例を扱います。

提供元が実施した評価です。Jev Atlas は結果を独立に再現していません。

プロジェクトを組み込む前に、小さなサンプルを編集して実際のリクエストをコピーできます。