실시간 iOS 앱에서의 UI 탐색을 위한 계획-기반 에이전트를 활용한 온라인 밀집 강화 학습
최첨단 비전-언어 모델은 사용자 인터페이스(UI) 탐색에서 뛰어난 성능을 보여주지만, 높은 추론 비용으로 인해 일상적인 사용이 어렵습니다. 반면, 지도형微調(SFT) 또는 오프라인 강화 학습으로 훈련된 소규모 모델들은 종종 정적인 경로를 단순히 암기하여 실행이 취약하고 오류 발생 시 복구가 불가능합니다. 이러한 한계를 해결하기 위해 우리는 실시간 iOS 애플리케이션에서 직접 UI 탐색 에이전트를 훈련시키는 새로운 온라인 강화 학습 프레임워크를 제안합니다. 우리의 프레임워크는 에이전트를 두 가지 특화된 구성 요소로 분리합니다: 계획…