FairStress: LLM의 의사결정에 대한 대칭적 로버스티티를 위한 새로운 공평성 평가 프레임워크
FairStress는 대규모 언어 모델(LLM)이 인구통계학적 정체성 교체 상황에서 내리는 의사결정의 안정성, 해석의 일관성, 그리고 내부 표현의 대칭성을 평가하는 새로운 벤치마크로, 모델에 ‘반고정관념식 과잉 보정’과 같은 체계적인 행동 편향이 존재함을 밝히며, 주류 평가 방법(예: BBQ)이 패러다임 차이로 인해 편향의 방향을 잘못 판단할 수 있음을 지적합니다.