본문으로 건너뛰기
AI NEWS JOURNAL
AI NEWS / ONE EVENT. MANY PERSPECTIVES.

ChatGPT, 위험한 대화를 자동으로 종료할 수 있도록 개선되며, 반복 위반 시 계정이 즉시 차단됩니다.

OpenAI는 최근 몇 주 내에 ChatGPT의 폭력적 콘텐츠 관리 기능을 업그레이드한다고 발표했습니다. 대화가 지속적으로 폭력이나 타인에게 심각한 피해를 초래하는 내용을 중심으로 전개될 경우, 모델이 이를 자동으로 종료할 수 있게 됩니다. 또한 동일한 계정이 이와 관련해 여러 차례 차단될 경우, 계정이 영구적으로 정지될 수 있습니다. 앞서 폭력을 계획하거나 실행하는 방법을 제공하는 행위는 이미 금지되어 있었으며, 이번 조치는 ‘자동 종료’ 기능을 추가함으로써 단순히 답변을 거부하는 수동적 방식에서 적극적인 개입으로 전환된 것입니다. 이제는 사용자가 스스로 행동을 중단하도록만 의존하지 않습니다.

1 건의 보도AIBase AI资讯 ↗

过去要靠用户自己收手,如今 AI 先把话筒抢过来。OpenAI 日前宣布,未来几周将给 ChatGPT 加上更硬的暴力内容闸门:当对话持续围绕暴力或严重伤害他人的念头打转,模型可以自行结束对话;若同一个账号多次因此类问题被掐断,封号也会落到头上。这并非从零立规——ChatGPT 原本就禁止提供策划或实施暴力的指导,此番升级是把"主动切断"补进了执行环节,从"被动拒答"走向"主动中断",平台对危险内容的处理逻辑明显前移。

全年龄段一视同仁

新规把限制铺到所有用户,不因成年而网开一面。调整重点在"历史袭击事件"的回答尺度——模型会从安全角度缩减甚至拒绝提供细节,覆盖袭击中使用的武器、装备及获取途径,也限制那些可能放大施害者知名度的伤亡规模横向比较。换句话说,成年人和未成年人面对同一套收紧后的边界,差异只在深度:成年用户同样会被问住,只是不再额外追加武器与安防的实用信息封锁。

未成年人再叠一层

对识别为未满 18 周岁的账号,OpenAI 额外拦掉可用于实施暴力的武器与安防系统实用信息,即便问题表面看不出暴力意图也会生效。青少年仍被允许用 ChatGPT 求助——如何预防或缓和暴力、联系可信赖的成年人,都不在封堵之列。配套的改进版年龄预测会结合用户行为等多重信号,持续判断账号是否可能未成年,必要时自动套用青少年保护;若被误判,也可主动提交身份信息核验。