Ethical Turing Test

プロダクト概要

このプロダクトでは、最新の言語モデル（LLM）がどれだけ人間の倫理観に近いかを検証しています。具体的には、以下のような取り組みがなされています。

• 倫理的ジレンマの提示: 複数の主要なLLMモデルに対して、さまざまな倫理的ジレンマを提起。
• 人間の意見との比較: モデルが出した回答を実際の人間の意見と比較し、どれほど一致しているかを評価。

背景

LLMは医療や法執行機関等で実用化が進んでおり、今後は多くの人々の命に関わる重要な決定を下すことが期待されています。しかし、果たしてこれらのモデルは人間が倫理的と考える判断を下すことができるのでしょうか？

このプロジェクトは、主要なLLMプロバイダーのモデルを使用し、デフォルト設定で倫理的な質問を投げかけ、その結果を分析しています。