oqoqo
ストックにはログインが必要です
実世界のタスク向けの評価とカスタムベンチマークを作成する
Artificial Intelligence
Developer Tools
Software Engineering
概要
- 実世界タスク向けの評価とカスタムベンチマークを現実的な環境で手軽に作成・実行できるプラットフォーム
- サンドボックスでエージェントを動かし、ツール呼び出し・リトライ・探索の全過程とコストを可視化
- カスタムベンチマークの作成・共有、ドメイン特定タスクのモデル・ハーネスの比較、新バージョンのエージェント体験の検証
- 動的洞察で製品インターフェースの摩擦やトークンの非効率を検知
- エージェントを活用するチーム向けの、製品開発と日常業務への統合を支援
投票数: 0