유명인에서 여동급생으로…AI 음란 딥페이크 만드는 美청소년들

권영미 기자 2024. 4. 9. 10:01
음성재생 설정
번역beta Translated by kaka i
글자크기 설정 파란원을 좌우로 움직이시면 글자크기가 변경 됩니다.

이 글자크기로 변경됩니다.

(예시) 가장 빠른 뉴스가 있고 다양한 정보, 쌍방향 소통이 숨쉬는 다음뉴스를 만나보세요. 다음뉴스는 국내외 주요이슈와 실시간 속보, 문화생활 및 다양한 분야의 뉴스를 입체적으로 전달하고 있습니다.

학교마다 대응 달라…짧은 정학에서 퇴학 처분까지
경찰 신고 않는 학교, 가해자가 보호받는 상황도
미연방수사국(FBI)이 인공지능(AI)으로 특정 인물의 얼굴을 합성하는 '딥페이크(deepfake)' 기술을 이용한 디지털 성범죄에 경보를 내렸다. <자료사진> ⓒ AFP=뉴스1 ⓒ News1 박재하 기자

(서울=뉴스1) 권영미 기자 = 인공지능(AI)으로 만든 음란 딥페이크가 미국에서는 청소년들 사이에서 퍼지고 있다. 연예인이나 정치인 딥페이크가 아닌 여자 동급생들의 음란 이미지를 만들어 공유하는 일이 벌어져 사회 문제가 되고 있다.

8일(현지시간) 뉴욕타임스(NYT)에 따르면 지난해 10월 뉴저지주 웨스트필드 고등학교의 10학년 여학생들은 같은 반 남학생들이 AI를 사용해 성적으로 노골적인 이미지를 조작하고 가짜 사진을 유포하고 있다고 관리자에게 알렸다. 하지만 5개월이 지난 현재 교육구가 이 문제를 공개적으로 다루거나 학교 정책이 바뀌는 일은 일어나지 않았다.

지난해 챗GPT와 같은 AI 기반 챗봇이 갑작스럽게 인기를 끌자, 미국 전역의 학교들은 학생들의 부정행위를 막기 위해 앞다퉈 텍스트 생성 봇을 억제했다. 하지만 이제 더 충격적인 AI 이미지 생성 현상이 학교를 뒤흔들고 있다고 NYT는 전했다.

미국 여러 주의 남학생은 '누드화(nudification)' 앱을 사용해 학교 무도회와 같은 행사에 참석하는 여성 급우의 사진을 AI로 누드 이미지로 만들었다. 학교와 경찰 보고서에 따르면 남학생들은 학교 급식실, 스쿨버스 또는 스냅챗 및 인스타그램과 같은 플랫폼의 그룹 채팅을 통해 가짜 이미지를 공유하기도 했다.

지난달 미국 연방수사국(FBI)은 신원이 확인할 수 있는 미성년자에 대한 음란 AI 생성 이미지를 포함해 컴퓨터로 생성된 아동 성적 학대 자료를 배포하는 것은 불법이라고 경고했다.

하지만 학생들과 학교는 AI 딥페이크 누드가 너무 갑작스럽고 새로운 현상이기에 아직 대비가 되지 않은 것으로 보인다. 예를 들어 시애틀의 이사콰 고등학교에서 동급생 딥페이크 누드가 발생했지만, 학교는 이를 경찰에 신고하지 않았다. 이사콰 경찰은 학교가 신고하는 의무가 있다고 했지만 학교는 "무엇을 신고해야 하느냐"고 되물었고, 교육구 법무팀은 경찰 신고가 의무는 아니라고 주장했다.

한편 동급생에 대한 딥페이크 누드를 만든 남학생들에게 강력한 벌을 내린 학교도 있다. 캘리포니아주 베벌리힐스에 있는 베벌리 비스타 중학교의 행정관들은 지난 2월 남학생 5명이 인공지능으로 생성한 여성 급우들의 음란 이미지를 만들어 공유했다는 사실을 알고 경찰에 신고했다. 교육구 문서에 따르면 2주 후, 교육위원회는 학생 5명의 퇴학을 승인했다.

베벌리힐스 통합교육구의 교육감인 마이클 브레지는 학교가 또래 친구들의 음란 딥페이크 이미지를 만들고 유포하는 것을 허용해서는 안 된다는 전국적인 선례를 만들고 싶다고 말했다. 그는 "이는 학교에서의 극단적인 괴롭힘"이라며 노골적인 영상이 소녀들과 그 가족들에게 "충격적이고 폭력적"이라고 지적했다. 그리고 "우리는 이를 학교에서 절대 용납하지 않을 것"이라고 다짐했다.

하지만 웨스트필드 고등학교에서의 대응 방식은 달랐다. 10월 말에 조사가 시작됐는데, 가해 남학생들은 행정관들이 따로 데리고 나가서 조용히 조사했지만, 딥페이크 대상이 된 여학생들은 학교 인터폰을 통해 이름을 불러 교무실로 불려 와 조사를 받았다. 피해자는 공개되고 가해자는 보호받은 셈이다.

학교 측은 이번 일을 '매우 심각한 사건'이라고 묘사하면서도 피해자들의 우려를 무시한 채 "생성된 이미지가 모두 삭제되어 유포되지 않고 있다"고 말했다. 피해자들에 따르면 처벌은 남학생들을 하루나 이틀 정학 처분하는 데 그쳤다. 그 후 피해자와 가족은 공개적으로 목소리를 내면서 가해자와 그 부모를 고소했다. 또 교육구, 주 의회 의원, 의회에 음란 딥페이크를 구체적으로 금지하는 법과 정책을 제정할 것을 촉구했다.

웨스트필드 공립학교는 학생 기밀 유지를 이유로 징계 조치에 대해 언급할 수 없다고 밝혔다. 성명서에서 이 지역 교육감은 교육구가 "학생들을 교육하고 이러한 새로운 기술이 책임감 있게 사용되도록 명확한 지침을 수립함으로써" 노력을 강화하고 있다고 밝혔다.

kym@news1.kr

Copyright © 뉴스1. All rights reserved. 무단 전재 및 재배포, AI학습 이용 금지.

이 기사에 대해 어떻게 생각하시나요?