阿里巴巴的HappyOyster让你在沙漠中驾驶并随时改写剧情

阿里巴巴ATH，即Qwen模型系列背后的研究机构，发布了HappyOyster 1.0。这是该公司首款主动实时交互式开放世界模型, , 一个冗长的名称，意味着它能从文本提示或参考图像生成一个虚拟世界，让你在其中行走、与角色互动，并改变接下来发生的事。

该模型围绕用户不仅应观看，更应行动的理念构建。通过单一提示，HappyOyster会生成一个定制环境，填充角色，然后模拟其对玩家指令的响应。输出可持续一分钟以上，并伴有同步的音频和视觉。

两种模式，两种方法

HappyOyster提供两种旗舰模式。冒险模式从文本提示或上传的图像生成一个开放世界。该模型将玩家置于该世界中，并随着玩家的移动、行动或发出指令实时更新世界。演示片段展示了一段穿越沙漠景观的驾驶序列, , 无尽的沙地、一辆汽车、随着玩家转向而移动的地平线。

导演模式则采取不同的角度。它将用户视为虚拟电影片场的实时导演。文本指令控制摄像机角度、角色编排和剧情推进。场景立即渲染并持续播放。用户可随时暂停、倒回或修改故事。一个演示展示了一个完全通过自然语言控制的角色换装小游戏。

应用场景

阿里巴巴将HappyOyster定位为一款面向多种实际应用的下一代多模态交互式内容工具：

• 游戏：开发者可通过上传图像和输入提示来原型化开放世界、角色互动和战斗序列，无需数月的环境建模工作。
• 互动戏剧与虚拟陪伴：用户通过自然语言构建角色和故事情节，并可随时改写剧情发展。
• 文化旅游：该模型为游客提供沉浸式探索体验, , 例如根据你的视线和提问做出响应的导览式虚拟游览。

SDK与合作

HappyOyster 1.0现已开放灰度测试。该公司提供Android、iOS和Web的跨平台SDK。开发者可通过服务端Open API管理虚拟世界，而客户端SDK处理RTC连接、视频渲染和实时交互。用户可在会话结束后导出片段。

Reactor已签约成为HappyOyster的首个官方合作伙伴。两家公司已建立正式战略合作关系，涵盖开放世界模型的产品实现和技术创新。

背景与对比

此次发布紧随阿里巴巴向世界模型的更广泛推进。Qwen团队此前开源了Qwen-AgentWorld，这是一款语言世界模型，模拟环境供AI代理训练, , 一个将物理抽象为文本的模拟器。HappyOyster则面向截然不同的受众：希望探索和创作的人类终端用户，而非训练代理。

同时，它发布之际正值中国实验室竞相实现生成式3D和互动内容的商业化。MiniMax今年早些时候发布了一款针对动漫风格动画优化的视频模型。阿里巴巴自身也在多模态模型上大举投资，Qwen的变体现已为从机器人到汽车再到眼镜的各种设备提供支持。

HappyOyster的灰度测试阶段将揭示该模型能否在大规模场景下维持一致、可信赖的互动世界。演示片段打磨得很精致。真正的考验是，当数千名用户开始驾驶穿越沙漠景观并暂停戏剧时，模型会如何表现, , 尤其是当他们离开预设路径时。