AdaptGauge

概要

AdaptGaugeは、少数ショットの追加がLLMの性能を低下させるケースを検出・可視化するオープンソースツールです。8モデル・4タスクの検証から、ピーク回帰、ランキング逆転、選択崩壊という3つの典型パターンを特定。学習曲線を自動で追跡し崩壊を検出・分類、異なる例の選択手法を比較できます。デモ結果も同梱され、すぐに事例を探索可能です。