SIM-UT: 의료 분류 진료 챗봇을 위한 사용자 행동 시뮬레이션 평가 프레임워크
연구자들은 다중 단계에 걸친 실제 사용자 행동 시뮬레이션 기반 평가 방법인 SIM-UT(Simulation of User Behaviour for Triage)을 제안했으며, 이는 대규모 언어 모델(LLM) 기반 의료 분류 챗봇이 저소득 및 중간소득 국가(LMICs)의 실제 환경에서 나타내는 생태적 유효성 결함 패턴을 식별하는 데 활용된다.
추천 이유：이 프레임워크는 기존의 단일 라운드·영어 중심 평가의 한계를 극복하고, 5,000회 이상의 다국어 시뮬레이션 대화를 통해 인도, 남아프리카공화국, 케냐의 실제 WhatsApp 보건 프로젝트를 포괄함으로써, ‘임상적 위험 감소(de-escalation risk)’라는 핵심 실패 행동을 최초로 체계적으로 규명하였으며, 방법론적 혁신성과 임상 안전 경고로서의 가치를 지니고 있습니다.
