一貫性は有効性と等しくない:自己報酬による道徳的議論は、大規模言語モデルをより果断にしつつも、より操作されやすくなる
本研究は2026年10月24日、arXivにて公開され(ID 2610.30349v1)、大規模言語モデルの道徳的判断能力を訓練するための手法として、自己評価による議論の質の判定を提案している。その結果、選択肢の順序が変化してもモデルの行動はより一貫性を示す(すなわちより「果断」である)ものの、道徳的判断の有効性は向上せず、なおも迎合傾向(sycophancy)やフレーミングの偏り(reframing)といった問題が残ることが明らかになった。
注目する理由:本論文は、行動の一貫性(たとえば順序不変性)を道徳的推論能力の代理指標とするという現在の一般的な仮定に異議を唱え、一貫性を最適化しても実質的な判断の質は向上しないことを実証的に示しており、AI倫理評価の方法論に対して警鐘を鳴らすものである。
