표정·시선·악수 재현...ETRI, 원격협업 기술 개발

ETRI는 개발 기술을 통해 '가상 악수'를 사실적으로 재현할 수 있게 했다.

마치 같은 공간에 있는 것처럼 상대방과 실시간으로 얼굴을 마주하고 악수까지 나눌 수 있게 하는 '차세대 원격 협업 기술'이 나왔다.

한국전자통신연구원(ETRI)은 표정·시선·악수를 정밀 재현하는 '확장현실(XR) 환경 원격 실재감 증강 기술'을 개발했다고 22일 밝혔다.

엑소스켈레톤 기반 능동형 가상 악수 기술, 실시간 디지털 휴먼 입체 실감화 기술이 핵심이다.

이 중 엑소스켈레톤 기반 능동형 가상 악수 기술은 단순한 손 움직임뿐만 아니라 악수할 때 상대방이 손을 쥐는 강도·방향까지 실시간으로 느낄 수 있도록 한다. 이를 위해 '외골격형 액티브 타입 XR 햅틱 글러브'를 독자 설계하고 개발했다. 덕분에 원격 환경에서도 상대방과 손을 맞잡는 듯한 몰입형 상호작용이 가능해졌다.

연구진은 지난달 ETRI 컨퍼런스 2025에서 가상 악수 데모 콘텐츠를 시연했다.

두 번째 기술인 실시간 디지털 휴먼 입체 실감화 기술은 양안 영상 기반 헤드마운티드 디스플레이(HMD) 환경에서 생성형 인공지능(AI)을 활용해 디지털 휴먼 입체감, 자연스러운 표정을 실시간 표현한다.

HMD와 센서로 사용자 손, 발, 시선, 표정, 입 모양, 목소리 등 다양한 비언어적 신호를 디지털 아바타에 자연스럽게 반영한다. 특히 AI 기반 3D 배경 생성 기술인 '3DGS'도 함께 적용해 사실적인 공간감과 몰입감을 구현했다.

기존에 고품질 디지털 휴먼을 실시간 구현하려면 대규모 시스템 자원이 필요했는데, 이 기술로 저품질 영상 소스도 개선할 수 있다. 원격 회의 환경에서 실제 인물에 가까운 얼굴 표현이 가능해졌다.

정성욱 ETRI 콘텐츠융합연구실 책임연구원은 “원격 협업 개념을 단순한 영상통화를 넘어 '실감형 상호작용' 시대로 전환하는 중요한 계기가 될 것”이라며 “향후 교육, 산업, 의료 등 다양한 분야에서 국민이 직접 체감할 수 있는 미래 협업 솔루션으로 발전시켜 나가겠다”고 밝혔다.

한편 능동형 가상 악수 기술은 ETRI 연구운영비 지원 사업 일환으로 수행돼 한국과학기술원(KAIST), 네오펙트, 영국 사우샘프턴대 등과 공동 연구로 진행 중이다. 디지털 휴먼 실감화 기술은 과학기술정보통신부와 정보통신기획평가원(IITP) '실감콘텐츠핵심기술개발사업' 일환으로 '실사 수준의 디지털 휴먼 생성과 30fps급 실감 렌더링 기술 개발'과제를 통해 수행됐다.

김영준 기자 kyj85@etnews.com