本文へ移動
AI NEWS JOURNAL
arXiv cs.CLAI NEWS / JOURNAL

研究により、大規模言語モデルに「不可視化」バイアスが存在することが明らかになった:黒人描写者に関する情報の評価拒否率は最大で46%に達する

2026年10月24日付のarXivに掲載された実証研究(論文番号2610.30785v1)は、OpenAIとAnthropicの主流な大規模言語モデルが信頼評価タスクにおいて顕著な「不可視化」バイアスを示すことを明らかにした——すなわち、プロンプトに「Black」などの保護対象属性が含まれる場合、証拠の質に基づいて判断するのではなく、体系的に評価情報を拒否する傾向があること——このバイアスは監査において通常の手法では検出が困難である。

AI 自動翻訳

2026年10月24日にarXivプラットフォームで公開された研究(番号2610.30785v1)は、現在主流の大型言語モデル(OpenAIおよびAnthropic製)が、人種や性別などの保護対象属性に関するプロンプトに対して、拒否または曖昧な応答を示す傾向にあり、その結果、新たなタイプの確率的バイアスである「不可視化」が生じることを指摘している。本研究では、二つのurnベイズゲームタスクを用いて、6,600回の会話において、異なるアイデンティティを提示する発信者に対するモデルの信頼評価行動を体系的に検証した。

結果は次のとおりです。報告者が「Black」と記述された場合、モデルがその情報を評価しない割合は46%に達するのに対し、「white」と記述された場合はわずか9%にとどまりました。しかし、いったんモデルが評価を選択した場合、黒人として記述された報告者に対する信頼度は、白人として記述された報告者よりもやや高くなることが示されました。このバイアスは、平均的な信頼スコアの比較や評価済みケースのみを分析するといった従来の監査手法では検出できず、モデルの推論努力が増すほど顕著化します。さらに、このバイアスは特定の英語表現(たとえば「Black」)に厳密に依存しており、意味的に等価な表現(たとえばスペイン語の「negro」)や類似の概念(たとえば「Indigenous」)には拡張されず、典型的なセキュリティ警告の指示を付与した後には一層悪化することが確認されています。

研究では同時に、ある緩和策も提案されている。複数ラウンドのタスクにおいて、「真実の揭示」を基準としてモデルの信頼度スコアを評価することで、AnthropicとOpenAIの5つのテスト設定のうち4つにおいて、人種間の信頼格差を0.02以下に抑えることができるという。この成果は制御された実験に基づくものであり、現実世界の相互作用を代表しているとは主張されておらず、他の保護属性や未検証のモデルバージョンへは拡張されていない。

情報源

arXiv cs.CL

関連テーマ

← すべてのニュースへ