Retrio

概要

• AIエージェントの期待動作を定義し、稼働中のアプリケーションに対して継続的にテストを実行できる評価プラットフォームです。
• 各レスポンスを分析して、意図しない挙動の変化や品質低下、時間の経過に伴うドリフトを検知します。

主な特徴

• テストスイートとゴールデンベースラインを作成し、実際の出力と期待される結果を比較できます。
• テスト実行ごとの差分を確認し、AIアプリケーションの品質がどのように変化したかを追跡できます。

こんな人におすすめ

• AIエージェントのリリースや更新時に、APIの応答有無だけでなく実際の振る舞いまで検証したい開発者。
• 複雑な従来型テストでは捉えにくいリグレッションや挙動のドリフトを、継続的に監視したいチーム。