덱스터, AI 자유시점 미디어 기술개발 주관

| 서울=한스경제 김종효 기자 | 덱스터스튜디오는 과학기술정보통신부와 정보통신기획평가원이 추진하는 '자유시점 미디어 압축·복원·렌더링 기술개발' 사업의 주관사로 선정됐다고 28일 밝혔다. 이번 사업에는 덱스터를 비롯해 서울대, 연세대, 포항공과대, 성균관대, 한국방송공사(KBS) 등 주요 연구기관이 참여한다.

사업의 핵심은 4D 가우시안 스플래팅 기반 자유시점 미디어의 고효율 압축·복원과 실시간 렌더링, 그리고 관련 국내 표준 기술 개발이다. 덱스터는 사진 몇 장만으로 AI가 사실적인 3D 공간을 구현하고, 움직이는 3D 영상 장면 속에서도 시점을 자유롭게 조정할 수 있는 기술을 개발한다.

3D 가우시안 스플래팅은 여러 장의 사진을 AI가 실시간 렌더링해 사실적인 3D 공간을 만드는 기술이다. AI가 촬영되지 않은 각도의 이미지까지 추론해 전통적인 3D 모델링 없이도 공간을 완성한다. 여기에 시간 축을 더한 4D 가우시안 스플래팅은 등장요소의 움직임, 변형, 물리 역학까지 반영해 동적 장면을 실시간으로 구현한다. 이를 통해 시청자는 영상 속에서 다양한 각도로 시점을 자유롭게 바꿀 수 있다.

이 기술은 VFX, XR 콘텐츠 제작뿐 아니라 공간 스캔, 디지털 트윈, 피지컬 AI 등 다양한 산업에서 활용도가 높다. 구글, 메타, 엔비디아 등 글로벌 기업들도 이 분야 연구와 활용에 나서고 있다.

가우시안 스플래팅은 수백만 개 이상의 정보를 저장해야 하는 초고용량 구조와 폐쇄적 포맷으로 인해 모바일·XR 기기 등에서 실시간 스트리밍에 제약이 있었다. 덱스터는 외산 솔루션 의존 없이 K-콘텐츠 산업을 위한 독자 기술 주권을 확립하고, 제작 효율성을 높이는 고효율 압축·복원·렌더링 표준 기술 개발에 나선다.

연구는 다양한 조건에서 고품질 자유시점 미디어 데이터를 획득하고, 동적 장면에 특화된 4D 가우시안 생성 모델을 AI로 학습시키는 방식으로 진행된다. AI가 데이터 중요도를 판단해 경량화하는 맞춤형 압축 체계도 구축한다. 개발된 기술은 상용 VFX 제작 파이프라인과 연계해 영화, OTT, 방송 프로그램 제작 효율을 실증한다.

덱스터 R&D연구소 송재원 소장은 "3D·4D 가우시안 스플래팅 기술은 시간과 비용을 줄이면서 고품질 3D 공간 데이터를 구현할 수 있다"며 "자유시점 미디어의 자산화와 상업적 라이선스 판매 등 새로운 부가가치 창출도 가능하다"고 말했다.