高斯

高斯梦想家

桥接二维与三维扩散模型快速生成三维高斯

三维高斯文本转三维扩散模型
所属分类🧊 AI 三维与动画
创作阶段🖌️ 美术
工具类型⚡ AI 原生工具
支持平台Windows、Linux
价格模式免费开源
适合人群适合三维场景创作者、实时渲染研究人员及技术美术团队。
官网链接● 正常
资料更新2026-11-16

🧠 在 AI 创作链路中的位置

在场景美术阶段将文本提示转为三维高斯表示。

所属阶段:🖌️ 美术 · AI 原生工具,直接用生成能力做生产

工具介绍

GaussianDreamer 是华中科技大学团队开源的文本到三维高斯生成项目,通过连接二维与三维扩散模型实现快速生成。项目聚焦基于三维高斯表示的资产生成,适合游戏场景、模型效果及实时渲染方向的研究与试验。

核心能力

  • 连接二维与三维扩散模型
  • 以文本驱动三维高斯生成
  • 强调快速生成能力
  • 源自 CVPR 2024 研究成果

👍 优点

  • 将扩散先验引入三维高斯生成
  • 适合探索快速三维场景制作方案

⚠️ 局限

  • 三维高斯表示不等同于通用网格资产
  • 工程部署与游戏引擎兼容性需进一步验证

典型使用场景

  • 从文本快速构建三维高斯场景
  • 研究扩散模型驱动的实时可渲染内容

使用教程

进阶⏱ 约 30 分钟🎯 生成一个可预览并导入引擎的三维高斯场景
  1. 1

    准备运行环境

    克隆 GitHub 仓库并阅读 README,按项目要求安装 Python、PyTorch、CUDA 和相关依赖;建议使用支持显卡加速的 Linux 或 Windows 环境。

  2. 2

    配置模型与权重

    下载 README 指定的二维、三维扩散模型权重及高斯生成所需文件,按照目录结构放置,随后复制配置文件并修改本地模型、数据和输出路径。

  3. 3

    编写场景提示词

    在项目提供的文本提示配置中描述场景,明确主体、数量、材质、风格和光照;首次测试先用简单场景,避免同时堆叠过多细节。

  4. 4

    运行三维生成

    执行 README 给出的推理命令,指定配置文件、提示词和输出目录;观察终端日志确认模型加载、采样与高斯优化均已完成。

  5. 5

    检查生成产物

    在输出目录查找点云、PLY 或项目支持的场景文件,使用仓库可视化脚本打开,检查主体轮廓、材质、视角和明显噪点,并按需调整提示词重跑。

  6. 6

    接入游戏引擎

    将 PLY 高斯资产转换为引擎可读取的格式或使用对应插件导入 Unity、Unreal;先放置于原型关卡,验证尺度、碰撞、材质与实时帧率,再决定是否精修。

💡 实用技巧

  • 提示词先写主体,再补风格与环境
  • 先做低分辨率测试缩短迭代时间
  • 生成后重点检查视角和边缘噪点
  • 引擎内先验证性能再投入美术精修

⚠️ 常见坑

  • 模型路径或权重版本不匹配会加载失败
  • 直接导入高密度PLY容易造成帧率骤降

完整图文教程:高斯梦境生成器入门:从提示词到三维资产

📖 同类工具怎么选

AI 三维与动画工具负责把文字、概念图、真人动作快速转成可编辑模型、实时场景与动画数据。选型时应重点检查拓扑质量、纹理与UV、引擎兼容性、动作稳定性、生成速度及商用授权,并按原型、角色、场景和动捕需求组合工作流。

阅读《AI 三维与动画制作全链路指南》

同类工具推荐