WorldGen如何开启3D生成的场景级时代?可编辑、可交互、可落地

2 阅读

近年来,人工智能在3D内容生成领域取得了显著突破,但长期受限于“单资产生成”的局限——即一次只能产出一个孤立的物体模型,缺乏上下文关联与整体结构。这种模式虽能加速美术资源制作,却难以满足游戏、影视、机器人训练等对复杂场景的真实需求。直到2026年,影眸Hyper3D推出世界生成模型 WorldGen,才真正将AI 3D从“造物”推向“造世界”,标志着场景级生成时代的来临。

文章配图

WorldGen的核心价值不在于炫技式的视觉呈现,而在于其输出结果具备可编辑性、可交互性与生产可用性。用户上传一张普通场景图(如厨房、客厅或街道),系统可在2~3分钟内生成一个完整的3D场景,其中每件家具、器皿甚至装饰品都是独立资产,可被单独选中、移动、替换或删除。更重要的是,这些资产自带物理属性——质量、摩擦系数、碰撞体等一应俱全,使得整个场景不仅“看得见”,更能“摸得着”“动得了”。

图片

这一能力背后,是影眸团队自研的 CAST(Compositional Asset-based Scene Transformation) 技术框架。该框架早在2025年便斩获计算机图形学顶会SIGGRAPH最佳论文,成为当年仅有的三家获奖商业机构之一(另两家为谷歌与Meta)。CAST并非简单堆叠多个图生3D模型,而是通过一套严谨的四步流程,解决场景生成中的结构性难题。

图片

首先,模型对输入图像进行对象分解与深度估计,识别出前景物体并推断其相对空间位置,将一张扁平RGB图转化为带有结构信息的对象清单。其次,针对每个被识别的物体,系统执行遮挡感知的3D补全——即使苹果被盘子遮挡一半,也能基于可见部分与场景语境合理推测其完整几何形态。第三步是空间对齐与尺度校准,将生成的各个3D资产精准放回统一坐标系中,确保整体构图与原图一致。最后,通过构建细粒度物体关系图(如支撑、接触、悬挂),结合符号距离场(SDF)进行物理校正,避免穿模、悬空或不合理堆叠。

图片

这套方法有效遏制了传统整体式生成中常见的“错误级联”问题。过去,若一个杯子的位置偏移几厘米,可能导致后续所有交互逻辑失效;而WorldGen通过模块化解耦,使局部调整不会引发全局崩溃,极大提升了生成结果的鲁棒性与实用性。

图片

在产品化过程中,团队又耗时近一年优化多模块串联的稳定性,最终实现从学术原型到工业级工具的跨越。如今的WorldGen不仅支持图像输入,还集成了AI Render模块,允许用户自由切换视觉风格、调整光照材质、执行电影级运镜,为概念演示与空间导览提供高质量输出。

WorldGen的价值,在真实产业场景中尤为凸显。以具身智能为例,机器人训练亟需大量高保真、可交互的3D环境,但真实采集成本高昂且存在安全风险,传统仿真又依赖人工搭建,效率低下。WorldGen与谋先飞的MotrixSim引擎、地瓜机器人的算力平台形成闭环:前者从真实影像生成带物理属性的场景,后者负责并行仿真与策略验证。更关键的是,WorldGen已支持直接导出至NVIDIA Isaac Sim,将“单资产导入”升级为“整场景导入”,大幅缩短仿真准备周期。

游戏开发领域,WorldGen正在改变关卡设计流程。以往,美术师需根据概念图逐一手工建模、摆放道具,耗时数周。现在,策划上传一张手绘草图,WorldGen即可生成初步可玩的3D关卡,设计师可即时调整动线、替换道具,再交由美术精修关键资产。生成的资产原生兼容Unity、Unreal Engine、Blender等主流工具链,无需额外转换。2026年7月,影眸已与Unity中国达成战略合作,共同构建从生成到实时渲染的工程闭环。

影视行业则看重其作为“数字导演台”的潜力。传统视频生成模型难以精确控制物体位移(如将苹果从左盘移到右盘),而WorldGen提供可控的3D基底,配合Seedance 2.5等视频生成工具,既能保证镜头调度的灵活性,又能输出电影级画质。目前已有项目将其用于前期预演与虚拟制片,实现“出手即是大片级”的高效创作。

此外,在XR与空间计算场景中,WorldGen让普通照片变身沉浸式可交互空间。搭配Apple Vision Pro等设备,用户可“走进”一张室内照片,自由调整家具布局,为室内设计、教育展示、虚拟看房等应用开辟新路径。

值得注意的是,WorldGen并未试图取代人类创作者,而是提供一个高质量起点。它不生成完整游戏或成片,但解决了所有创意产业共通的前置瓶颈:如何快速将脑洞转化为结构化、可操作的3D场景。过去,AI 3D的交付单位是“一个模型”;现在,变成了“一个场景”。这一转变看似微小,实则重构了整个内容生产管线。

更深远的意义在于,WorldGen重新定义了“世界生成模型”的内涵。不同于学术界宽泛讨论的“世界模型”(通常指预测未来状态的动态系统),WorldGen聚焦于静态但结构完备的三维世界构建,强调资产的独立性、关系的合理性与物理的真实性。正如其CTO所言:“真正的世界需要载体,而我们选择3D作为这个载体。”

可以预见,随着WorldGen类工具的普及,3D内容生产的门槛将进一步降低,创意迭代速度将指数级提升。从单个花瓶到整座城市,AI不再只是辅助工具,而成为构建虚拟世界的“共同建筑师”。而这场变革的起点,正是从一张图开始的——2分钟后,一个活的世界已然诞生。