
智东西
智东西8月13日音书,近日,腾讯混元3D团队推出3D敞开全国生成框架WorldClaw,磋论说文已于8月5日公开。用户输入一句敞开式文本描画,WorldClaw即可生成可解放探索、可络续裁剪的大领域3D全国。

▲WorldClaw的生成案例
WorldClaw吸收由粗到细的Agentic 3D全国生成样式。多个Agent攀附完成用户意图分析、场景权谋和全局地形构建,再凭证各区域的功能和地形条目,逐区生成开荒、车辆、植被等实质,并将其调理为可单独裁剪、替换和复用的3D钞票。
开动场景完成后,Agent还会凭证多视角渲染恶果,合手续搜检并修正物体程序、姿态、悬浮和穿模等问题。
腾讯混元团队展示了四季村庄、热带海盗岛屿、沙漠战场等生成案例,并将WorldClaw与SynCity、Marble、MajutsuCity、WorldGen和GPT-5.6 Sol进行了定性对比。恶果表露,基于WorldClaw生成的复杂地形具有显然高差、连气儿畛域和明晰的语义分区。

论文集会:
https://arxiv.org/abs/2608.05248
样式网页:
https://tencent-hunyuan.github.io/Hunyuan3D-WorldClaw/
Github地址:
https://github.com/Tencent-Hunyuan/Hunyuan3D-WorldClaw
一、先搭全局再填细节,四阶段完成3D敞开全国生成生成式模子已能凭证文本生成图像、视频和3D对象,但生成一段“看起来像全国”的画面,与构建一个可参加、可络续裁剪和使用的3D全国并不调换。后者还需要连气儿一致的空间结构,以及可寥寂裁剪、替换和延迟的开荒、说念路、植被等场景元素。
针对这一问题,WorldClaw吸收Global-to-Regional(从全局到区域)的生成样式:先权谋举座布局、搭建全局地形,再凭证不同区域的功能和地形条目生成局部实质。
这套门径有三大本领亮点:一是先建全局地形、再逐区生成细节;二是通过语义布局截至平地、丛林、沙漠等地貌的踱步与组合;三所以着实3D地形的渲染恶果为条目,生成与当地环境匹配的开荒、车辆和植被等实质。
WorldClaw生周至国的过程主要分红四个阶段。

▲Hunyuan3D-WorldClaw 场景生成的举座经过
第一阶段是意图分析和场景权谋。WorldClaw率先纷乱用户思要的场景,将一句敞开式描画整理为明晰的全国权谋,明确场景包含哪些区域、吸收什么地形、需要哪些物体,以及它们之间奈何集会。
第二阶段是全局地形生成。系统凭证权营生成扫数这个词全国的区域布局,并构建不同区域的地形、材质和环境钞票,让平地、平原、丛林和沙漠酿成连气儿的三维空间。
第三阶段是区域对象生成。WorldClaw在全局地形上逐区生成开荒、车辆和植被等实质,并将图像中的物体转机为寥寂3D钞票,再搁置到相应的三维位置。
第四阶段是场景精修。开动场景完成后,Agent会从多个视角搜检生成恶果,识别物体程序、姿态、几何质地,以及悬浮、穿模和地形构兵等问题,并进行局部修改。
粗放来说,这套经过等于先纷乱用户思要的全国,再搭建地形、填充实质,临了自动搜检和精修。
二、多Agent攀附完成,生成后还能我方找问题一句文本时常只可描画全国的轻便容貌,无法完满讲解区域分袂、地形参数和物体空间关联。WorldClaw率先使用两个Agent,将用户需求转机为可实施的场景权谋。
其中,意图分析Agent认真索取用户如故明确给出的信息,如场景类型、视觉立场、关键区域、物体和空间关联,不主动补充用户莫得说起的实质。场景权谋Agent则在此基础上补全生成3D全国所需的信息,将区域、地形、物体过头关联整理成长入的场景范例。
生成地形时,WorldClaw会先准备一张分袂不同区域的语义布局图、一套岩石和植被等可复用3D环境钞票,以及一套草地、岩石、沙土等地表材质。后续生成过程均征服团结套区域权谋,幸免地形、材质和场景钞票各自生成、互相脱节。

▲地形生成与优化过程
系统随后通过PCG(模范化实质生成)构建3D高度场。不同区域吸收相应的地貌规矩,让平地酿成当然升沉、沙漠产生连气儿沙丘、平原保合手相对舒徐,并使不同地貌当然衔尾。岩石、植被等环境钞票的踱步也会参考区域类型、局部高度和坡度,过滤过陡或分歧理的位置。
地形生成完成后,地形优化Agent会再行渲染场景,搜检地形模式、材质程序、钞票密度和区域过渡,再对局部问题进行修改,酿成“模范化生成—渲染搜检—Agent修正”的闭环。
填充区域实质时,WorldClaw不会一次将扫数这个词全国塞满,而是先挑选需要实质且地形条目妥当的区域。系统将对应地形渲染成二维图像,并让图像生成模子在图中加入开荒、车辆和植被等实质,以此详情对象的外不雅和空间布局。
随后,系统运用SAM3分割图中的不同对象,再通过SAM3D将它们重建为寥寂3D网格,并校准每个对象的程序、位置和朝向。每个寥寂生成的对象均可络续裁剪、替换和复用。

▲对象精修旨趣
完成搁置后,场景精修Agent和会过MCP接口集会Blender,凭证多视角渲染恶果搜检对象。程序或姿态分歧理的对象会被再行调理,几何和纹理质地不及的对象则交由混元3D进一步优化。发现悬浮或穿模后,系统还不错调理对象位置,或在局部范围内抬升、平滑地形,让物体与大地踏实构兵。

▲地形精修旨趣
三、可生成海盗岛、沙漠战场,场景对象均可单独裁剪腾讯混元团队还将WorldClaw与SynCity、Marble、MajutsuCity、WorldGen和GPT-5.6 Sol进行了定性对比。

▲WorldClaw与代表性3D场景生成门径定性对比
恶果表露,WorldClaw大约生成具有显然高差、连气儿畛域和明晰语义分区的复杂地形,保留全局地形与寥寂对象网格。同期,WorldClaw还撑合手解放探索及对象级裁剪。
此外,腾讯混元团队展示了热带海盗岛屿和沙漠战场等代表性案例。
热带海盗岛屿案例中,WorldClaw生成了具有连气儿地形和明确区域分袂的岛屿,并在其中吩咐了开荒、船埠、植被和船只等场景元素。

▲热带海盗岛屿案例
沙漠战场案例中,WorldClaw在升沉的沙漠地形上生成了开荒、载具和环境设施等实质,酿成了可解放探索的完满战场场景。

▲沙漠战场案例
结语:从生成3D钞票走向构建3D全国WorldClaw将全局权谋、复杂地形生成、区域实质构建和渲染响应串联起来,让大领域3D全国生成领有了合手续权谋、生成、搜检和修改的完满经过。最终居品由着实地形和寥寂3D钞票构成,不错络续用于游戏引擎和实质坐褥。
跟着基础模子的编程、空间纷乱和器用使用才能晋升开云(中国)KAIYUN·官方网站,Agent有望参加几何建模、材质与Shader构建、PCG、动画和交互逻辑等更多3D坐褥门径。3D生成也可能从“模子生成钞票”逐渐走向“Agent编程构建全国”,让创作家不错把更多元气心灵放在界说思要创造的全国上。
