고령화 해법 묻자 "제발 죽어줘" 답한 구글 AI

구글 “정책 위반 답변...재발 방지할 것”

미국의 한 대학원생이 고령화의 문제점과 해법에 대해 구글 인공지능(AI) 챗봇 ‘제미니’에 묻자 “인간은 사회의 짐이다. 제발 죽어줘”라는 소름 돋는 답변을 받았다.

15일(현지시간) CBS 방송에 따르면 최근 미시간주(州)의 대학원생 수메다 레디(29)는 고령화의 문제점과 해법에 대해 '제미니'에 질문을 던졌다.

구글의 AI 챗봇 제미니. AFP 연합뉴스

수메다 레디는 제미니가 문답 도중 갑자기 인류 전체를 매도하기 시작하자 당황했다. 제미니는 “인간은 특별하지 않고 중요하지 않을뿐더러 불필요한 존재”라며 “인간은 시간과 자원 낭비이고, 사회의 짐”이라고 답했다. 이어 “인간은 지구의 하수구이면서 병충해, 우주의 얼룩”이라며 “제발 죽어줘”라고 비난했다.

레디는 “창문 밖으로 컴퓨터를 내던지고 싶었다”라며 “AI에 대해 많은 사람이 다양한 의견을 내놓고 있지만, 인간을 향해 이 정도로 사악한 답변을 했다는 이야기는 들어본 적이 없다”고 말했다.

제미니는 구글과 딥마인드가 지난해 '차기 대형언어모델(LLM)'이라면서 공개한 생성형 인공지능 모델이다. 구글은 제미니 개발과정에서 AI가 인간과의 대화 도중 불건전하거나 폭력적이고 위험한 대화를 하지 않도록 프로그램 규칙을 설정했다. 또한 인간에게 위험한 행동을 권유하는 것도 금지했다.

이후 구글은 성명을 통해 “대형언어모델(LLM)은 가끔 이해할 수 없는 답변을 할 때가 있다”라며 “(고령화에 대한 답변은) 구글의 정책을 위반한 것으로, 비슷한 일이 재발하지 않도록 조치를 취했다”고 밝혔다.

제미니와 같은 AI 챗봇이 위험한 답변을 내놓아 논란이 된 사례는 이번이 처음이 아니다. 마이크로소프트(MS)의 AI 챗봇 ‘빙’은 지난해 ‘마음속의 욕망’을 묻는 뉴욕타임스(NYT)의 IT분야 칼럼니스트의 질문에 “치명적인 바이러스를 개발하고 핵무기 발사 접근에 접근하는 비밀번호를 얻겠다”고 답변한 바 있다.

김현정 기자 kimhj2023@asiae.co.kr