Project Genie 是 Google DeepMind 和 Google Labs 的实验性研究原型,正在向美国(18 岁以上)的 Google AI Ultra 订阅者推出。它允许用户创建、探索和混搭互动世界。该原型是一个由 Genie 3、Nano Banana Pro 和 Gemini 驱动的 Web 应用。Genie 3 在用户移动并与世界互动时实时生成前方的路径,并为动态世界模拟物理和交互。 该体验围绕三个核心能力:世界草图、世界探索和世界混搭。用户可以使用文本以及生成或上传的图像进行提示,以创建生动、不断扩展的环境,定义角色和视角,探索可导航的环境,并基于他们的提示将现有世界混搭成新的诠释。他们还可以下载其世界和探索的视频。 该原型存在已知限制。生成的世界可能看起来不完全逼真,或者并不总是严格遵循提示、图像或现实世界的物理规律。角色有时可能较难控制,或控制延迟较高,并且生成时间限制为 60 秒。8 月宣布的一些 Genie 3 能力(例如可提示事件)尚未包含在内。Google AI Ultra for Business 用户无法访问。

用户使用 Project Genie 创建、探索和混搭自己的互动世界。
用户使用 Project Genie 通过文本以及生成或上传的图像来草拟世界和角色。
用户使用 Project Genie 探索可导航的环境,其中前方的路径是实时生成的。
用户使用 Project Genie 基于他们的提示将现有世界混搭成新的诠释。
用户使用 Project Genie 下载其世界和探索的视频。
世界模型可用于模拟现实世界的场景,例如机器人技术、动画、虚构作品、地点和历史背景。