Scovant

概要

静的チェックだけでは不十分。Scovantは実際のAIエージェントを用い、購入・予約を実行して結果を報告します。支払いは行いません。

特徴

• 1サイトにつき10種類のLLMエージェントを比較
• デプロイごとにCIベースラインと比較して回帰を検出
• どのエージェントが訪問するかを固定せず、複数モデルで検証

実行の流れ

サイトを開き、ナビゲート、カートへ追加、チェックアウトまで進み、支払いには進まない。経過のトランスクリプトを提供します。

スコアリングと透明性

スコアではなくエージェント対応の回帰。ルール・重みは公開されており、透明性を確保しています。