日期: 2026-08-05 | 用途: AI短剧/电影场景预可视化(previz) | 硬件: RTX 3090 24GB + RTX 3060Ti 8GB
针对 "快速构建场景白膜" 这一目标,2026年开源生态已发生根本性变化。我整理出 4条技术路线,按场景规模和精度需求选择:
| 路线 | 最佳方案 | 速度 | 白模质量 | 最适合 |
|---|---|---|---|---|
| 🏆 AI场景生成 (新!) | HunyuanWorld 2.0 / FlashWorld | ⚡ 7-30秒 | ⭐⭐⭐⭐⭐ | 全景/室内/户外 一张图→3D世界 |
| 🥈 AI多物体分解 | MIDI-3D (CVPR 2025) | ~30秒 | ⭐⭐⭐⭐ | 室内场景 单图→多物体3D |
| 🥉 程序化构建 | Blender Python bpy (已有技能) | ~3-15秒 | ⭐⭐⭐ | 结构化室内/城市 完全可控 |
| 4️⃣ 摄影测量重建 | 3DGS / HunyuanWorld-Mirror | 分钟级 | ⭐⭐⭐⭐⭐ | 真实场景照片→3D精确还原 |
最大发现:腾讯 HunyuanWorld 系列(2025-2026年)彻底改变了游戏规则。一张图片或一句话→完整可漫游3D世界(含mesh导出),这才是你需要的。
GitHub: Tencent-Hunyuan/HY-World-2.0 | ⭐ 2,472 | License: 开源 | 创建: 2026-04-10
| 维度 | 详情 |
|---|---|
| 核心能力 | 文本/图片→全景图→可漫游3D世界(含mesh导出!可直接导入Blender/UE) |
| 技术管线 | ① HY-Pano 2.0(全景生成)→ ② 轨迹规划 → ③ WorldStereo-2(立体视频扩展)→ ④ 3DGS重建 → ⑤ Mesh导出 |
| 核心优势 | ✅ 直接导入Blender/UE/Isaac引擎 ✅ 一次生成,渲染成本≈0 ✅ 精确控制+真实物理碰撞 ✅ 实时渲染 |
| vs 视频世界模型 | 视频模型=看一次就没了;HY-World=建一个世界,永久保留 |
| GPU需求 | CUDA 12.8, Python 3.11+, 推荐 A100/H100(4090量化版可跑) |
| 输出格式 | 3DGS + Mesh (OBJ/GLB) + 可交互3D世界 |
| 适用场景 | 室内/户外全景场景、VR/游戏开发、电影previz |
# 安装
git clone https://github.com/Tencent-Hunyuan/HY-World-2.0
cd HY-World-2.0
conda create -n hyworld2 python=3.11.15 && conda activate hyworld2
pip install -r requirements.txt
# 使用 - 图片→全景→3D世界
from pipeline import HunyuanPanoPipeline
pipeline = HunyuanPanoPipeline.from_pretrained('tencent/HY-World-2.0')
output = pipeline('input.png')
output.save('output_panorama.png')
# 然后跑5阶段世界生成管线
GitHub: imlixinyang/FlashWorld | ⭐ 834 | License: 开源
| 维度 | 详情 |
|---|---|
| 核心能力 | 单张图片/文本→高质量3DGS场景,仅需7秒(A100)/4秒(H100) |
| 速度 | 🚀 7秒/场景 (1×A100), 4秒/场景 (1×H100) — 目前最快的3D场景生成 |
| 与HunyuanWorld关系 | FlashWorld 是 HunyuanWorld 团队成员 (imlixinyang) 的加速版,被官方推荐为快速3DGS生成方案 |
| GPU需求 | 单GPU即可(A100/H100最佳,3090可能需要量化) |
| 输出格式 | 3DGS (Gaussian Splatting) |
| 限制 | 输出是3DGS而非传统mesh,需要后续转换为GLB |
GitHub: VAST-AI-Research/MIDI-3D | ⭐ 938 | License: Apache-2.0
| 维度 | 详情 |
|---|---|
| 核心能力 | 单张图片→多物体分解→同时生成多个3D实例→组装成场景(含空间关系) |
| 技术特点 | 多实例扩散模型(Multi-Instance Diffusion),不是逐物体生成而是同时生成整个场景 |
| 管线 | ① Grounded SAM分割 → ② MIDI多实例3D扩散 → ③ MV-Adapter纹理 → 输出GLB场景 |
| GPU需求 | 30GB VRAM(带纹理生成),仅形状生成更少 |
| 输出格式 | GLB(完整带纹理的场景) |
| 优势 | ✅ 输出直接是GLB ✅ 物体间空间关系准确 ✅ 室内场景效果好 |
| 劣势 | ⚠️ 30GB VRAM需求高(3090 24GB不够完整管线) ⚠️ 更适合室内物体场景,不适合大范围户外 |
| 方案 | 类型 | ⭐ Stars | 速度 | 质量 | GPU VRAM | 输出 | 适合场景 |
|---|---|---|---|---|---|---|---|
| HunyuanWorld 2.0 | AI场景生成 | 2.5K | ⚡~30秒 | ⭐⭐⭐⭐⭐ | ~24-40GB | Mesh+3DGS | 全景/室内/户外 |
| FlashWorld | AI场景生成 | 834 | ⚡⚡7秒 | ⭐⭐⭐⭐ | ~16-40GB | 3DGS | 室内/户外 |
| MIDI-3D | AI多物体 | 938 | ~30秒 | ⭐⭐⭐⭐ | ~30GB | GLB | 室内物体场景 |
| HunyuanWorld 1.0 | AI场景生成 | 2.9K | ~30秒 | ⭐⭐⭐⭐ | ~24GB+ | Mesh | 全景/户外 |
| LucidDreamer | AI 3DGS生成 | 1.5K | 分钟级 | ⭐⭐⭐ | ~16GB | 3DGS | 梦幻场景 |
| SceneDreamer | AI场景生成 | 658 | 分钟级 | ⭐⭐⭐ | ~16GB | 体素 | 无界地形 |
| Holodeck | LLM+场景布局 | 561 | 秒级 | ⭐⭐⭐ | 低 | 布局JSON | 室内布局规划 |
| DiffuScene | AI布局生成 | 343 | 秒级 | ⭐⭐⭐ | ~8GB | 布局JSON | 室内布局 |
| InstructScene | AI布局生成 | 152 | 秒级 | ⭐⭐⭐ | ~8GB | 布局JSON | 室内布局 |
| Blender Python (bpy) | 程序化 | 19.6K | ⚡3-15秒 | ⭐⭐⭐ | 零GPU | GLB/.blend | 结构化室内/城市 |
| Hunyuan3D-2 | 单物体AI | 14.4K | ~60秒/物体 | ⭐⭐⭐⭐⭐ | 6-16GB | GLB | 单物体/角色 |
| TRELLIS v1 | 单物体AI | 13.4K | ~30秒/物体 | ⭐⭐⭐⭐ | 16GB+ | GLB | 单物体 |
工作流:
优势:最快获得高保真3D白模,比纯程序化更具细节,比纯AI更可控
挑战:HunyuanWorld 2.0 需要大VRAM(建议A100或双卡),3090需量化版
如果你只需要快速白模预览(不需要完美纹理),FlashWorld 7秒一个场景是目前最快的方案。
# 7秒生成一个3DGS场景
# 输入:一张图片或一段文字描述
# 输出:3DGS场景(可转GLB)
# 适合:快速迭代白模预览,不追求完美质量
你的 blender-procedural-scene-builder + kais-blender-layout 技能已经能做:
适合:结构化场景(咖啡馆/办公室/教室等)、需要精确控制物体位置的场景
局限:对非结构化/有机场景(森林/废墟/自然地形)效果差
代表:HunyuanWorld 2.0 / FlashWorld / MIDI-3D
✅ 优势:
❌ 劣势:
代表:Blender bpy / Sverchok / Archipack
✅ 优势:
❌ 劣势:
代表:3DGS / NeRF / HunyuanWorld-Mirror
✅ 优势:
❌ 劣势:
代表:Holodeck / InstructScene / DiffuScene
✅ 优势:
❌ 劣势:
| GPU | 推荐方案 | 说明 |
|---|---|---|
| 3090 24GB | HunyuanWorld 1.0 量化版 / MIDI-3D(仅形状)/ Blender程序化 | HunyuanWorld 2.0 需要量化或CPU offload |
| 3060Ti 8GB | Blender程序化 / Holodeck / DiffuScene | 大模型跑不了,专注程序化路线 |
| 双卡 32GB | FlashWorld / MIDI-3D(完整带纹理) | 双卡合并VRAM可以跑更多 |
你的 blender-procedural-scene-builder 已经能快速生成室内白模。继续扩展场景模板库。
速度:3-15秒 | 成本:零 | 推荐度:⭐⭐⭐⭐
这是最大的增量价值。一张dreamina生成的场景图→完整3D世界→Blender多角度白模→img2img精化。
速度:7-30秒 | VRAM:24-40GB | 推荐度:⭐⭐⭐⭐⭐
⚠️ 需要验证3090能否跑量化版。如果不行,FlashWorld可能是更好的选择(设计为单GPU)。
当需要从一张场景图提取多个独立3D物体时,MIDI-3D 的多实例分解能力无可替代。
速度:~30秒 | VRAM:30GB | 推荐度:⭐⭐⭐
| 项目 | GitHub | ⭐ | 类型 |
|---|---|---|---|
| HunyuanWorld 2.0 | Tencent-Hunyuan/HY-World-2.0 | 2.5K | AI场景→3D世界 |
| HunyuanWorld 1.0 | Tencent-Hunyuan/HunyuanWorld-1.0 | 2.9K | AI场景→3D世界 |
| FlashWorld | imlixinyang/FlashWorld | 834 | 极速3DGS生成 |
| MIDI-3D | VAST-AI-Research/MIDI-3D | 938 | 单图→多物体3D场景 |
| HunyuanWorld-Voyager | Tencent-Hunyuan/HunyuanWorld-Voyager | 1.6K | RGBD视频世界探索 |
| HunyuanWorld-Mirror | Tencent-Hunyuan/HunyuanWorld-Mirror | 1.2K | 视频/多视角→3D重建 |
| LucidDreamer | luciddreamer-cvlab/LucidDreamer | 1.5K | 3DGS场景生成 |
| Holodeck | allenai/holodeck | 561 | LLM→室内布局 |
| DiffuScene | tangjiapeng/DiffuScene | 343 | 扩散模型→室内布局 |
| InstructScene | chenguolin/InstructScene | 152 | 指令→室内布局 |
| SceneDreamer | FrozenBurning/SceneDreamer | 658 | 无界3D地形生成 |
| Awesome-3D-Scene-Generation | hzxie/Awesome-3D-Scene-Generation | 1.1K | 论文列表(综述) |
| Sverchok | nortikin/sverchok | 2.5K | Blender程序化节点 |
| Hunyuan3D-2 | tencent/Hunyuan3D-2 | 14.4K | 单物体3D生成 |
| TRELLIS | microsoft/TRELLIS | 13.4K | 单物体3D生成 |