등장인물 심장박동까지 전달…KAIST "보는 웹툰→경험하는 웹툰"

확장현실 만화 플랫폼 개발…독자 표정 변화에 따라 특수효과도 나타나

연구 이미지(AI 생성) [한국과학기술원(KAIST) 제공. 재판매 및 DB 금지]

(대전＝연합뉴스) 김준호 기자 = 한국과학기술원(KAIST)은 다양한 독자들이 현실 공간에서 웹툰을 입체적으로 즐길 수 있는 차세대 확장현실(XR) 만화 플랫폼을 개발했다고 21일 밝혔다.

전기및전자공학부 이안 오클리 교수 연구팀은 인간-컴퓨터 상호작용(HCI, 사람이 컴퓨터와 보다 쉽고 자연스럽게 상호작용하는 방법을 연구하는 분야) 전문가와 실제 웹툰 창작자, 독자 등15명이 참여한 사용자 연구를 통해 차세대 확장현실(XR) 만화가 갖춰야 할 핵심 디자인 원칙과 발전 방향을 제시했다.

웹툰의 다음 진화 단계로 XR(가상현실·증강현실·혼합현실을 아우르는 기술) 기기에 주목한 연구팀은 XR환경에서 만화를 읽고 직접 제작할 수 있는 새로운 플랫폼 '코믹스XR(ComiXR)'을 개발했다.

화면에서는 구현하기 어려운 공간감과 입체 음향, 시선 추적(사용자의 눈동자 움직임을 인식하는 기술) 등을 만화에 접목하기 위해 메타 퀘스트 프로(Meta Quest Pro) 기반의 ComiXR 플랫폼을 구축했다.

실험 참가자들은 기기를 착용한 채 실제 방 안에 3차원(3D) 캐릭터와 말풍선, 의성어 등을 자유롭게 배치하며 자신에게 가장 편안하고 몰입감 높은 만화 공간을 직접 구성했다.

실험 결과, 독자들은 단순히 평면 만화 페이지를 가상 공간에 띄우는 방식보다 현실 공간의 깊이감을 적극 활용하는 연출을 훨씬 선호했다고 연구팀은 설명했다.

특히 독자의 시선을 추적해 특정 캐릭터를 바라볼 때만 다음 대사가 나타나도록 하는 기능은 결말을 미리 보게 되는 '스포일러'를 효과적으로 방지하는 것으로 나타났다.

독자의 표정 변화에 따라 특수효과가 나타나고, 햅틱(진동 등 촉각을 통해 정보를 전달하는 기술) 기능으로 등장인물의 심장 박동까지 전달하는 등 기존 만화에서는 경험할 수 없었던 새로운 감각적 경험도 구현했다.

연구팀은 XR 만화가 기존 스마트폰 웹툰을 대체하기보다 작품 세계관을 더욱 생생하게 체험하는 특별 전시와 교육 콘텐츠, 시각장애인과 저시력자 등 다양한 이용자의 문화 접근성을 높이는 새로운 플랫폼으로 활용될 것으로 전망했다.

이안 오클리 교수는 "이번 연구는 단순히 만화를 입체적으로 구현한 것이 아니라 독자의 공간과 시선, 움직임까지 고려해 미래의 만화를 어떻게 설계해야 하는지를 제시한 것"이라고 말했다.

kjunho@yna.co.kr

▶제보는 카톡 okjebo