研究提出新指标RCG评估LLM生成的合成调查受访者覆盖度
该论文于2026年10月24日发布在arXiv(编号2610.30900v1),提出“受访者覆盖差距”(RCG)这一新评估指标,用于衡量大语言模型(LLM)生成的合成调查受访者在完整答题画像空间中对真实人类受访者的覆盖程度。
推荐理由:现有评估方法仅关注单题答案分布或题间相关性,无法识别LLM生成的受访者是否复现了真实人群中实际存在的答案组合;RCG首次从全量答题剖面出发量化覆盖缺口,并在两项美国社会调查数据上实证发现所有测试LLM均存在显著未覆盖人群,且表现劣于简单边际采样基线和高斯copula模型。
