보고 듣고 반응하는 가상세계…이루어질 ‘지니’

빅테크 ‘월드모델’ 각축전

구글이 27일(현지시간) 발표한 월드모델 ‘지니 4’의 시연 화면. 나만의 가상세계 등을 만들어볼 수 있다. 구글 홈페이지 갈무리

구글 딥마인드 새 ‘지니 4’ 공개
엔비디아, 로봇 가상훈련 강화
크래프톤 등 국내서도 개발 열중

글 몇줄만 입력하면 눈 덮인 산길이 눈앞에 펼쳐진다. 그 길을 달리다 날씨를 바꿀 수도 있고, 마주친 사람과 대화를 나눌 수도 있다. 이런 가상세계를 만드는 인공지능(AI)을 가리키는 ‘월드모델’이 빅테크 새 격전지로 떠올랐다.

구글 딥마인드는 27일(현지시간) 월드모델 ‘지니 4’를 공개했다. ‘지니 3’이 눈으로 둘러보는 가상세계에 가까웠다면, 이번에는 소리를 듣고 등장인물과 대화하며 서로 반응하는 수준으로 발전했다. 구글은 게임 개발자가 코드를 짜기 전에 가상공간을 먼저 둘러보고, 영화 제작자가 카메라 구도와 대사를 바꿔가며 장면을 시험해보는 등 누구나 ‘나만의 가상세계’를 만들 수 있다고 설명했다. 지니 4는 일부 테스터에게만 공개됐으며, 곧 유료 구독자에게 제공될 예정이다.

월드모델은 공간과 사물의 움직임을 학습해 어떤 행동을 하면 무슨 일이 벌어질지 예측하는 AI다. 지니 4처럼 가상공간을 만드는 모델은 이용자가 방향을 틀거나 물체에 다가가면 그에 맞춰 다음 장면을 새로 만든다. 이런 특성 덕에 현실에서 움직이는 AI인 ‘피지컬 AI’를 먼저 시험해보는 가상 실험장으로도 주목받고 있다.

월드모델 선도기업인 엔비디아는 로봇과 자율주행차를 위한 ‘AI 가상훈련장’ 구축에 속도를 내고 있다. 초기 ‘코스모스’가 훈련용 가상영상을 만드는 데 주력했다면, 지난 21일에는 가상세계에서 로봇과 자율주행차의 대응 능력까지 시험할 수 있도록 학습·검증 도구를 강화해 내놨다.

AMD도 지난달 ‘AI 대모’ 페이페이 리가 이끄는 월드랩스를 약 82억달러(약 11조원)에 인수하기로 하며 본격적으로 월드모델 경쟁에 뛰어들었다. 월드랩스는 글이나 사진으로 돌아다닐 수 있는 3차원(D) 가상공간을 생성하는 AI 기업이다.

국내 주요 정보기술(IT) 기업들도 월드모델을 미래 먹거리로 점찍고 개발에 열중하고 있다.

크래프톤은 지난 8일 서울대와 손잡고 가상공간과 사물의 일관성을 유지하는 월드모델 기술을 3년간 공동 연구하기로 했다. 게임·3D 콘텐츠용 AI를 개발해온 NC AI도 지난달 정부 과제에 선정돼 조선·반도체 공장 상황을 예측하는 월드모델과 로봇 제어기술 개발에 나섰다.

다만 넘어야 할 벽도 적지 않다. 지니 4가 한 번에 이어갈 수 있는 체험 시간은 수 분에 그치고, 시간이 지나면 사물의 모양이나 위치가 달라지는 등 일관성을 유지하는 데 어려움을 겪고 있다. 무게나 마찰 같은 물리 현상을 정확히 재현하지 못하면, 가상에서 훈련을 마친 로봇이 현실에서 오작동할 수 있다는 점도 난관이다.

스탠퍼드대 인간중심AI연구소도 안전이 중요한 분야에서 월드모델의 신뢰성을 평가할 검증 기준이 부족하다고 지적했다. 딥마인드도 이날 발표에서 “복잡한 물리 현상의 정확한 재현과 장시간 일관성 유지는 여전히 연구 과제”라고 밝혔다.

김세훈 기자 ksh3712@kyunghyang.com