프롬프트를 기반으로 무한한 3D 세계를 생성해주는 구글의 Project Genie

구글이 최근에 상호작용할 수 있는 3d 가상 세계를 실시간으로 생성해주는 프로젝트를 공개했다.

https://blog.google/innovation-and-ai/models-and-research/google-deepmind/project-genie/

Project Genie: Experimenting with infinite, interactive worlds

https://labs.google/projectgenie

LABS.GOOGLE

 

이 Genie의 가장 매력적인 점은 이미지 프롬프트로 실시간으로 생성되는 3d 가상 세계와 상호작용할 수 있다는 거다. 나중에 vr까지 지원되면 자신이 원하는 사진이나 nanobanana로 만들어낸 이미지로 원하는 세계에서 놀 수 있다는 의미다.

 

좀 더 자세하게 설명하자면 이 프로젝트는 2025년 8월 Genie 3 모델 미리보기에서 시작된 프로젝트인데, DeepMind의 AGI(범용 인공지능) 미션의 일환으로 현실 세계의 다양성을 탐색하고 시뮬레이션할 수 있는 월드 모델을 개발했다고 한다. 기존 정적 3D 스냅샷과 달리 실시간으로 경로를 생성하며 물리적인 상호작용을 보여준다. 

 

다만 아직 미국의 google ai ultra 구독자에게만 제한적으로 공개가 되어있어 체험은 힘든데 유튜브에 테스트해본 한국 분들이 많아서 유튜브로 간접적으로 체험할 수 있을 것 같다. 

 

공식 블로그에서 설명하고 있는 기능은 아래와 같다.

 

World Sketching: 텍스트나 이미지로 환경 생성, 캐릭터 정의(걷기, 날기 등), Nano Banana Pro로 미리보기 및 수정.

World Exploration: WASD 등으로 탐험하며 실시간 생성(720p, 20-24fps, 60초 제한).

World Remixing: 갤러리나 랜덤 월드 리믹스, 탐험 비디오 다운로드

 

기본적으로 이 genie 프로젝트는 ai로 실시간으로 상호작용 가능한 환경을 구현해준다는 점에서 굉장히 획기적이라고 할 수 있다. 하지만 여러 사람의 후기를 보니 아직 메모리 문제로 인한 기존 환경 변화 문제, 글씨 깨짐 현상 문제, 1초 정도의 느린 반응성 문제, 물리 현상 오류 문제가 많이 남아있어 상용화까지 넘어야할 산은 많이 남아있는 것 같다.