字节跳动发布新一代 3D 生成大模型 Seed3D 2.0，重点提升几何精度和材质质量，称已把 3D 内容生成从演示级推进到生产可用。模型在几何生成和纹理材质生成两项核心指标上取得 SOTA，纹理生成人类评测中，相对主流模型的偏好率超过 69%。 Seed3D 2.0 还把能力扩展到部件级生成和场景组合，可先拆分 3D 内容部件再补全形状，并输出带完整关节信息、兼容 URDF 等标准格式的内容，适配 Isaac Sim 等物理仿真引擎。 seed.bytedance.com 1 个帖子 - 1 位参与者 阅读完整话题
IT之家 4 月 23 日消息，字节跳动今日正式发布更高精度的新一代 3D 生成大模型 —— Seed3D 2.0 ，目前 Seed3D 2.0 技术报告 已公开，API 也已上线火山引擎。 字节跳动表示，在与现有 3D 生成模型的对比评测中，Seed3D 2.0 在 几何生成、纹理材质生成 两项核心指标上均 取得 SOTA 结果 （指在某项具体任务或基准测试中表现最优的模型或方法）。模型对复杂结构的还原更加精细，PBR 材质的生成也具有更强的真实感和稳定性。 ▲ 几何生成维度的定性对比 字节跳动招募了 60 位具有 3D 建模经验的人类打分员，对 Seed3D 2.0 和六个主流模型的生成质量进行两两盲评对比。 ▲ 评估分为纯几何结构生成对比和带有纹理贴图的 3D 生成两部分 Seed3D 2.0 在几何形状生成的对比测试中展现出显著优势，相比所有其他 3D 生成模型呈现更高的偏好率（人类打分员认为其生成质量更优的比例），验证了架构创新带来的几何质量提升。 在纹理 3D 内容生成的人类打分中，Seed3D 2.0 同样领先其他基线方法，面对目前行业内主流模型，Seed3D 2.0 的偏好率达到 69% 以上。 IT之家附技术报告概述如下： Seed3D 2.0 引入 Coarse-to-Fine 两阶段生成策略，把“整体结构”和“几何细节”解耦，分开优化，从而在锐利边缘、薄壁结构和复杂拓扑等几何生成难点上取得突破。 ▲ Seed3D 2.0 几何生成的完整流程 同时，Seed3D 2.0 采用统一的 PBR 生成模型联合建模完整 PBR 贴图，使用 MoE 架构提升高分辨率材质细节与边界精度，并且引入 VLM 先验，增强未知光照下的材质分解稳定性与准确性。 ▲ Seed3D 2.0 的纹理生成流程 在几何与纹理之外，Seed3D 2.0 能完成部件级分割与补全、铰接资产生成以及基于图像、视频或文本的场景组合生成，让生成式 3D 模型可应用于实际部署。 ▲ Seed3D 2.0 的仿真场景生成流程
36氪获悉，字节跳动正式发布更高精度的新一代3D生成大模型——Seed3D 2.0。据介绍，该模型采用MoE架构，通过稀疏专家路由，在扩大模型参数量和分辨率的同时控制推理计算量，使模型能生成更丰富的纹理细节和更精确的金属-粗糙度边界。目前Seed3D 2.0技术报告已公开，API也已上线火山引擎。