AI时代的3D内容生产工具.pdf

AI时代的3D内容生产工具。近期 AI+3D 新产品产业催化汇总。英伟达 CEO: NVIDIA 3D 平台 Omniverse Cloud 将可以连接到苹果公司混合头显 Vision Pro；3D 素材赋 能 Sora 等文生视频工具深度学习；Stability AI 公司发布全新的 AI 生成 3D 大模型 TripoSR，效果惊艳。

DUSt3R 技术储备丰厚，助力 AI 深度学习 3D 重建，工业应用未来可期。 DUSt3R 该框架可根据拍摄的图像重建 3D 模型，无需相机校准。此外， DUSt3R 支持单目和双目视图，能生成深度图等，为后续分析和应用提供了 丰富数据。

谷歌所推出的 DreamFusion 项目，突破 3D 模型训练样本数量问题。该项 目结合 SDS 与 NeRF 技术，将二维图像扩散模型转化为三维模型，无需依赖三 维训练数据。DreamFusion 生成的 3D 模型几何表现优秀。

英伟达发布 GET3D 和 Magic3D 两大创新工具，重塑元宇宙内容创建流程。 GET3D 利用 2D 图像训练，生成高保真纹理和复杂几何细节的 3D 图形。而 Magic3D 能在 40 分钟内创建带有彩色纹理的 3D 网格模型，且支持根据提示词 编辑已创建的模型。

OpenAI 发布了开源的 Shap-E 模型，能快速创建准确的 3D 模型，成本效 益显著。该模型可生成纹理网格和神经辐射场两种 3D 表示形式，支持多样化 渲染和导入其他 3D 应用，展现出在游戏开发等领域的广泛应用前景。

阿里巴巴发布 Object Drawer，是首个基于神经渲染的商品三维建模产品。 该技术可重建多种商品模型，低成本高保真。通过优化网络结构和几何先验， 提升推理和训练速度，实现快速推理高分辨率图像。支持实时高清交互三维展 示，解决光照和纹理问题，提升渲染效果。

商汤科技发布两款 3D 内容生成平台：格物与琼宇，满足不同行业对于可交 互 3D 实景内容的需求。格物专注于小物体的高精度重建与交互，适用于商业 广告、商品营销等领域；琼宇则实现城市级大空间的 3D 内容生成，支持数字孪 生、影视创作等。

普林斯顿大学发布的 Infinigen AI，为计算机视觉领域提供了强有力的工具。 Infinigen AI 能生成自然界的植物、动物等场景并自定义地形和自然现象，为计 算机视觉领域提供了新的数据生成和场景模拟方法，适用于 3D 视觉研究。

Adobe 联合开发的 DMV3D，在高效率生成高保真 3D 图像方面表现出色。 这是一种基于 transformer 的 3D 大型重建模型，能在单个 GPU 上快速生成高 保真 3D 图像，避免繁琐的单独训练和优化步骤。

Epic Games 推出的 MetaHuman，大大缩短传统建模的时间及资源。支持 云端快速创建高度逼真的 3D 角色，并允许高度自定义。它简化了 3D 建模的复 杂性，消除了对高端硬件的需求，可与虚幻引擎 5 紧密集成。