구글 딥마인드가 말 한마디로 날씨와 카메라까지 바꾸는 실시간 월드 모델 Genie 4를 공개했습니다 | DAKER 커뮤니티
구글 딥마인드가 2026년 10월 27일 새로운 월드 모델 Genie 4를 공개했습니다. 월드 모델은 장면을 영상으로 실시간 생성하면서 사용자의 조작과 말에 반응하는 모델입니다. Genie 4는 영상뿐 아니라 주변 소리와 대화까지 동시에 만들어 내며, 말 한마디로 날씨나 카메라, 등장인물을 실시간으로 바꿀 수 있습니다. 아직 신뢰 테스터 대상의 연구 프리뷰 단계라 당장 써 볼 수는 없지만, 생성 영상과 시뮬레이션에 관심 있는 분이라면 방향을 가늠하기 좋습니다.
말로 바꾸는 실시간 세계
Genie 4의 핵심은 생성된 세계를 실시간으로 조종한다는 점입니다. 사용자는 표준 키보드로 이동과 카메라를 조작하고, 텍스트로 장면을 바꿉니다. 날씨를 바꾸거나 카메라를 옮기거나 새로운 사람이나 물체를 넣으면, Gemini가 주변 장면에 맞게 지시를 해석해 반영합니다. 사용자가 입력하지 않는 사이에도 Gemini가 장면을 관찰하며 세계가 일관되게 이어지도록 이끕니다.
위에 나온 소리는 모두 Genie 4가 직접 만들어 낸 것입니다.
구글은 Genie 4가 실시간 상호작용 시뮬레이션에서 사실감, 부드러운 움직임, 네이티브 오디오를 끌어올렸다고 설명했습니다. 특히 사람을 묘사하는 능력이 크게 나아져, 등장인물이 자연스럽게 움직이고 환경에 반응하며 실시간으로 조종됩니다.
Gemini가 안에서 계획을 세웁니다
Genie 4는 Gemini 계열의 능력을 끌어와 만들어졌습니다. Gemini Omni가 시뮬레이션을 실제 세계의 모습과 동작에 맞추고, 다른 Gemini 모델이 장면의 일관성과 연속성을 유지하는 데 필요한 복잡한 추론을 맡습니다. 여러 단계를 거치는 사건을 다룰 때는 Gemini 3.8 Flash가 안내 에이전트로 참여합니다. Genie 4가 세계를 그리는 동안 Gemini가 장면을 계속 지켜보며 목표를 여러 단계로 나누고, 들어오는 화면을 검토해 각 단계가 성공했는지 확인합니다. 세계가 바뀌거나 사용자가 개입하면 그 자리에서 계획을 고칩니다. 구글은 이 방식으로 로봇 연구와 연결해, Gemini 4 Argon과 Genie 4를 함께 써서 앱트로닉의 아폴로 휴머노이드가 체커 게임을 하는 과정을 단계별로 시뮬레이션한 예도 소개했습니다.
어디에 먼저 열리고, 무엇이 아직 부족한가
Genie 4는 신뢰 테스터 대상 연구 프리뷰로 먼저 공개됐고, 이어 구글 AI 울트라 구독자의 Project Genie와 Gemini API·Google AI Studio 얼리 액세스 파트너에게 제공될 예정입니다. 구글은 신뢰 테스터들이 영화 사전 시각화, 기록 사진을 바탕으로 한 역사 공간 재현, 게임 프로토타입 제작, 기업용 시나리오 생성 등에서 시험하고 있다고 전했습니다. 다만 한계도 분명히 밝혔습니다. 짧은 세션에서는 일관된 환경을 유지하지만, 시뮬레이션이 길어지거나 복잡한 수정이 여러 번 쌓이면 시각적 세부나 사물의 지속성이 흐트러질 수 있습니다. 복잡한 물리 상호작용, 실시간 오디오 정확도, 읽을 수 있는 글자 표현, 공간 정확도, 장기 일관성은 아직 연구 중인 과제입니다. 생성된 모든 영상과 오디오에는 식별용 워터마크 SynthID가 들어갑니다.
영상·시뮬레이션을 다루는 팀이 챙길 점
이번 발표에서 바로 가져갈 수 있는 것은 생성 영상을 코드 없이 빠르게 시험하는 작업 흐름입니다. 카메라 각도와 조명, 대사를 말로 바꾸며 여러 번 찍어 보고, 2D 사진 한 장을 움직이는 공간으로 만들어 보는 식입니다. 데이터 분석이나 로봇 대회를 준비하는 팀이라면, 실제 환경을 꾸리기 전에 시나리오를 빠르게 만들어 보고 어떤 상황에서 모델이 흔들리는지 미리 찾아 두는 용도로 눈여겨볼 만합니다. 구글은 장기적으로 코드와 언어 모델의 논리적 추론과 픽셀 단위 시뮬레이션의 감각적 표현을 합친 혼합형 월드 모델을 지향한다고 밝혔는데, Gemini가 뒤에서 구조와 흐름을 짜고 Genie가 세계의 모습과 소리를 그려 내는 분업이 그 첫걸음입니다. 물론 지금은 프리뷰라 결과를 그대로 쓰기보다 아이디어 점검에 가깝습니다.
여러분이라면 이런 실시간 월드 모델을 어떤 작업의 초안 단계에 써 보고 싶으십니까?