SevenTnewS

构建世界的AI

阿里巴巴HappyOyster:单张图片即可生成可探索的3D世界

阿里巴巴的HappyOyster 1.0是首个主动式实时交互开放世界模型,让开发者和创作者能够通过文本或图片构建可探索的虚拟环境。灰度测试提供了Android、iOS和Web的SDK。

Emmanuel Fabrice Omgbwa Yasse AI 辅助

2026-07-24 · 阅读需 4 分钟

阿里巴巴HappyOyster:单张图片即可生成可探索的3D世界
来源 : Alibaba Cloud C…

阿里巴巴ATH研究团队发布了HappyOyster 1.0,该模型被称为“全球首个主动式实时交互开放世界模型”。其核心理念简单直接:输入文本提示或照片,它就能生成一个3D世界,用户可以步行穿越、驾车驶过,并探索超过一分钟,同时带有同步的音频和视觉效果。

两种模式划分了体验。冒险模式会生成一个包含自定义角色的完整开放世界,并实时响应用户指令。阿里巴巴公告中描述的演示场景展示了一个带有驾驶物理引擎的沙漠景观,但该模型可以处理提示中描述的任何环境。导演模式将用户转变为虚拟电影导演:文本指令控制摄像角度、角色移动和剧情发展,并且可以随时暂停、倒回或重写场景。

公告中未详细介绍底层架构,但该模型本身是一个基于多模态输入训练的生成系统,而非有限状态游戏引擎。这意味着每一次交互都可能生成新内容,而不是从预建的响应库中选择。这种能力在持续使用中是否可靠,还需要第三方测试来确认。

示意图:HappyOyster 1.0 概述
该图按照文章描述,组织了HappyOyster的模式、架构、访问方式和用例。

HappyOyster 1.0目前处于灰度测试阶段,这意味着只有选定的开发者和企业合作伙伴可以访问。阿里巴巴发布了面向Android、iOS和Web的SDK,以及用于管理虚拟世界的服务器端Open API。客户端SDK负责RTC连接、视频渲染以及冒险模式和导演模式。用户在会话结束后可以导出录制的视频。

Reactor已签约成为首个官方集成合作伙伴。两家公司建立了战略合作伙伴关系,重点围绕这款开放世界模型进行产品实施和技术创新。Reactor的具体角色未在公告中进一步说明,但此次合作暗示了其商业化路径不仅仅局限于作为演示工具。

公告中提到了几个目标用例。游戏开发者可以利用HappyOyster,通过图片和提示快速原型化开放世界、角色交互和战斗序列,而无需在游戏引擎中从头开始构建。互动短剧和AI数字伴侣是另一个类别:用户通过自然语言构建角色和故事情节,其余部分由模型处理。文化旅游也被列为可能的应用场景,为游客提供沉浸式虚拟体验。

这些用例都尚未完全验证。模型处于灰度测试阶段,恰恰是因为粗糙的边缘需要打磨。这种规模的实时交互式生成计算成本高昂,输出质量在很大程度上取决于提示的清晰度以及模型对物理和场景构成的理解。阿里巴巴的公告缺少具体指标,如生成时间、分辨率或交互延迟。

尽管如此,方向本身很重要。目前大多数生成式3D模型生产的是静态场景或短视频片段。HappyOyster追求持久性和交互性,这是一个更困难的问题。如果灰度测试验证了该方法的可行性,那么SDK生态系统可能使其成为游戏和互动媒体早期原型设计的实用工具。如果遇到困难,主要问题将是实时生成能否满足用户对一致性和连贯性的期望。

目前,拥有灰度测试访问权限的开发人员可以进行实验。该模型是推动生成式AI超越一次性输出、进入一种生活空间感的真正尝试。它能否实现这一雄心,将是灰度测试期间需要解答的故事。

每天早晨用 3 分钟掌握科技要闻

每个工作日一封邮件,只讲真正重要的 AI 与科技动态。