GSPC open measurement board
ストックにはログインが必要です
オープンなAI測定ボード――認証ではなく、測定を行います
Artificial Intelligence
概要
- GSPCは、AIシステムを公開・固定されたテストで評価し、誰でも再計算・検証できる証拠として結果を公開する取り組みです。
- 透明性の低い安全性スコアではなく、測定結果そのものと、その根拠や訂正履歴をオープンに扱います。
特徴
- 測定カードには署名を付与し、署名のない補足的な実行結果も明確に区別して表示します。
- 23の評価軸を測定するボードラインと、誤りや変更を追跡できるオープンな訂正履歴を提供します。
- 認証や成績付けを販売せず、「認証」ではなく「測定」に徹する方針を掲げています。
こんな人におすすめ
- AIの安全性や性能について、ブラックボックス的なスコアではなく、再現・検証可能な根拠を確認したい人。
- AI評価の結果を自分で再計算したり、測定方法や結果に対して検証・異議申し立てを行いたい研究者や開発者。
投票数: 0