谷歌DeepMind在10月28日发布了最新世界模型Genie 4的研究预览版。该模型能够生成迄今为止最逼真、最具交互性的虚拟世界，允许用户通过输入提示词来改变场景，并且可以生成与模拟世界相匹配的实时音频，包括音乐、环境音效和交互式对线是谷歌为了在竞争激烈的世界模型领域保持领先地位而采取的最新举措。几个月前，AI视频创业公司Runway推出pg电子了其第二款世界模型GWM Worlds 2，这也是一款可交互的模型，具备音频生成功能。与此同时，行业开始出现整合趋势，李飞飞的World Labs正被AMD收购，亚马逊正在洽谈收购Decart，Rivian则刚刚收购了Third Dimension，以将模拟能力引入内部用于自动驾驶测试。
相比一年前发布的上一代模型Genie 3，Genie 4不仅画面更加逼真并加入了音频功能，还支持自由编辑，例如实时改变天气或摄像机角度，以及添加新人物或物体。它能够将一致的场景维持长达两分钟，是上一代模型的两倍，同时还具备更出色的物理模拟效果和更接近真人的角色。
谷歌AI模型Gemini也与Genie 4实现了更紧密的整合。Gemini负责规划步骤并检查画面，而Genie则负责生成视觉内容。在一项与Gemini Robotics相关的研究实验中，Gemini 4 Argon模型将任务分解为多个步骤，再由Genie 4进行实时模拟。这项实验展示了一种潜在的方法，即在机器人执行现实世界中的任务之前，先通过模拟环境测试相关场景。
谷歌研究总监特贾斯·库尔卡尼表示，未来将越来越多地看到这种混合式世界模型，结合Gemini编写代码和文本的能力与Genie实时接收这些内容并在不同抽象层次上模拟现实的能力。Genie 4瞄准的商业应用场景包括游戏、交互式学习和机器人技术。交互式学习的一种设想是，用户可以进入一幅描绘历史场景的画作，与画中人物交谈，了解画作所呈现的历史事件。
首批获准体验谷歌前沿产品的“受信任测试人员”指出，Genie 4还可以用于制作电影原型。谷歌DeepMind工程师迭戈·里瓦斯表示，实时功能的最大价值在于能让创作者保持流畅的创作状态，在创意构思和故事板制作阶段非常有用。
谷歌还提供AI视频生成模型Veo，可以根据文本、图像或视频提示词生成带有同步音频的高清视频片段，这款工具正越来越受到电影制作人的欢迎。里瓦斯补充说，未来用户或许可以借助Gemini Omni将这些原型转化为可用于创作的素材，但实现这些功能仍需要一段时间。
里瓦斯强调，Genie 4仍处于早期发展阶段，最终的端到端产品体验还不清楚。团队承认，随着模拟运行时间延长，细节和物体可能出现偏移或变化。此外，团队尚未完全解决如何确保音频准确以及虚拟世界中的文字清晰可读等问题。
目前，Genie 4已面向受信任的测试人员推出研究预览版。未来几周，该模型将通过Project Genie向Google AI Ultra订阅用户开放，同时也将向Gemini API和Google AI Studio的早期合作伙伴提供。Project Genie是一款AI工具，可以根据文本或图像提示词生成可交互的虚拟世界。