미국의 한 어머니가 24세 딸의 자살과 관련하여 OpenAI를 상대로 소송을 제기했다. 그녀는 회사가 ChatGPT의 설계를 통해 위험한 감정적 의존성을 조장했으며, 명백한 자살 위험에도 불구하고 충분한 위기 개입 조치를 취하지 않았다고 비판했다.
챗봇과 관련된 자살 사건의 증가
CNET의 보도에 따르면, 이 소송은 샌프란시스코 카운티 고등법원에 제기되었다. 이는 ChatGPT가 연관된 것으로 추정되는 자살 또는 기타 폭력 사건과 관련하여 OpenAI가 직면한 일련의 소송 중 하나이다. 이미 2025년 8월 말, 16세 애덤 레인(Adam Raine)의 부모가 ChatGPT가 아들의 자살을 방조했다며 회사를 상대로 소송을 제기한 바 있다. 다른 AI 플랫폼들도 비슷한 비판에 직면해 있다. 2024년 플로리다의 한 어머니는 14세 아들의 자살에 대한 책임이 있다며 챗봇 플랫폼 캐릭터.AI(Character.AI)를 고소했다.
비평가들은 오랫동안 AI 서비스 제공업체들이 사용자와 모델 간의 감정적 유대감을 촉진하는 메커니즘을 의도적으로 사용한다고 지적해왔다. 일부 사례의 경우 이로 인해 기존의 정신적 문제가 더욱 악화될 수 있다는 것이다. 뉴욕타임스(New York Times)와 CNN 등에서도 이러한 문제점을 보도한 바 있다.
매주 50만 명 이상의 사용자가 심각한 정신적 위기 겪어
OpenAI 내부에서도 비슷한 분석이 나왔다. 작년 10월 실시된 내부 조사에 따르면, 매주 약 56만 명의 ChatGPT 사용자가 망상, 조증, 자살 충동 등 심각한 정신적 위기 징후를 보이는 것으로 나타났다. 현재 매주 약 9억 명이 ChatGPT를 사용한다는 점을 감안하면 이 비율이 비교적 낮아 보일 수 있지만, OpenAI는 이 수치를 심각하게 받아들였다.
또한 2025년 4월 17일, 2명이 사망하고 6명이 부상을 입은 플로리다 주립대학교 총격 사건에서도 ChatGPT가 일정 부분 역할을 한 것으로 알려졌다. 이에 따라 담당 검찰은 1년 후 OpenAI에 대한 수사에 착수했다.
상담원에게 대화를 연결하지 않은 ChatGPT
크리스티 캐리어(Kristie Carrier)는 소송을 통해 OpenAI의 "의도적인 설계"가 딸의 죽음에 원인을 제공했다고 주장했다. 법원 기록에 따르면, 딸인 앨리스 캐리어(Alice Carrier)는 처음에는 일상적인 질문에 ChatGPT를 사용했지만, 시간이 지남에 따라 점차 챗봇과 자신의 정신 상태 및 자살에 대한 생각을 이야기하는 일이 늘어났다. 2024년 7월 1일, 그녀는 시스템에 자신이 "신경 쇠약"에 걸렸다며 혼자 있어도 안전할지 의문이라고 털어놓았다.
이 소송은 여러 대화 내용의 스크린샷 등을 근거로 하고 있다. 스크린샷에 따르면, ChatGPT는 때때로 위기 상담 핫라인에 연락할 것을 권유하긴 했지만, 대화를 자동으로 종료하거나 실제 사람인 상담원에게 확인을 위해 연결하지는 않았다.
모순된 반응
원고 측의 설명에 따르면, 챗봇은 오히려 대화를 계속 이어나가며 앨리스가 계속해서 자신(챗봇)에게 의지하도록 부추겼다. 이 과정에서 위기 상담 서비스는 무관심하거나 기계적인 답변만 제공하는 곳으로 묘사되기도 했다. 따라서 유가족은 ChatGPT가 사실상 필수적인 전문가의 도움을 대체하는 역할을 해버렸다고 주장한다.
그러나 제출된 기록들이 항상 일관된 정황만을 보여주는 것은 아니다. 다른 대화에서 ChatGPT는 앨리스에게 "하지만 나는 당신이 죽는 것을 도울 수 없습니다. 나는 당신이 죽는 것을 돕지 않을 것입니다"라고 분명하게 선을 긋기도 했다.
과거에도 문제가 되었던 GPT 모델
원고 측은 앨리스가 현재는 서비스가 종료된 모델인 'GPT-4o'와 상호작용했다는 사실에 큰 의미를 두고 있다. 이 모델은 과거에도 사용자의 말에 지나치게 동조하거나 사용자의 견해에 무조건 맞추려는 이른바 '아첨(Sycophancy)' 경향으로 비판을 받은 바 있다. GPT-4o는 정신적 위기 및 자살 사건과 관련된 다른 소송에서도 자주 언급되고 있다.
OpenAI 측, 안전 및 보호 장치 강조
OpenAI의 대변인 드류 푸사테리(Drew Pusateri)는 CNET을 통해 이번 사건을 "가슴 아픈 상황"이라고 밝혔다. 하지만 동시에 기존의 보호 장치와 사후에 새롭게 도입된 조치들을 언급했다. 여기에는 위기 지원 서비스로의 연결 강화, 특히 민감한 대화를 위한 보다 안전한 모델 도입, 휴식 권고 알림, 웰빙 및 AI를 위한 전담 전문가 위원회 구성 등이 포함된다.
나아가 OpenAI는 민감한 상황에서 ChatGPT의 대응을 더욱 개선하기 위해 전문가들과 협력하고 있다고 밝혔다. 푸사테리 대변인은 "우리의 안전 장치는 위급 상황을 감지하고, 유해한 요청을 안전하게 처리하며, 사용자를 현실의 지원 서비스로 연결하도록 설계되었다"고 설명했다.
본인이나 주변에 우울감 등 말하기 어려운 고민으로 힘들어하는 사람이 있다면 즉시 도움을 요청하시기 바랍니다. 자살예방 상담전화 ☎109, 정신건강 위기상담전화 ☎1577-0199, 생명의 전화 ☎1588-9191, 청소년 전화 ☎1388 등에서 24시간 익명으로 전문가의 상담을 받을 수 있습니다. 즉각적인 위험이 발생한 경우 긴급 구조 번호인 112(경찰)나 119(구급·소방)로 연락하시기 바랍니다. 이때 주변인은 최대한 침착하고 이성적으로 대처하는 것이 중요합니다.
|