阶跃星辰开源3D大模型 Step1X-3D,可生成高保真、可控的 3D 内容
创始人
2025-05-14 17:49:04

IT之家 5 月 14 日消息,阶跃星辰正式发布并开源 3D 大模型 ——Step1X-3D,这是继图像、视频、语音、音乐等模态后,阶跃星辰在多模态方向的最新成果。Step1X-3D 模型总参数量达 4.8B(几何模块 1.3B,纹理模块 3.5B),凭借坚实的数据基础与先进的 3D 原生架构,可生成高保真、可控的 3D 内容。阶跃星辰称,Step1X-3D 不止于视觉“好看”,更追求实现“好用”与“可控”,旨在为 3D 内容创作提供强大而可靠的技术引擎。

阶跃星辰公布了完整的数据清洗策略,数据预处理策略,以及 800K 高质量的 3D 资产,3D VAE、3D geometry Diffusion 以及 texture Diffusion 的全链路训练代码开源,助力 3D 生成社区发展。

开源链接与体验地址:

GitHub:https://github.com/stepfun-ai/Step1X-3D

HuggingFace:https://huggingface.co/stepfun-ai/Step1X-3D

ModelScope:https://www.modelscope.cn/models/stepfun-ai/Step1X-3D

Tech Report:https://arxiv.org/pdf/2505.07747

IT之家附官方给出的核心特性与技术支撑如下:

Step1X-3D 尝试解决 3D 内容生成的关键挑战,在数据、生成质量与可控性上进行了创新实践。

1、数据驱动与算法协同优化

好数据是好模型的基础。Step1X-3D 对超 500 万原始数据进行严格筛选与处理后,建立了包含 200 万高质量、标准化的训练样本库,有效克服了行业数据稀缺与质量参差的瓶颈。

数据处理流程示意图

此外,Step1X-3D 通过增强型网格-SDF 转换技术等方法,从源头保障了模型学习的精准性与最终生成的高效性,让水密几何转换成功率提升了 20%,也让 Step1X-3D 拥有了强大的泛化能力与细节捕捉力。

Step1X-3D 数据筛选与 SDF 转换流程示意图2、3D 原生生成:结构清晰、细节生动

Step1X-3D 采用先进的 3D 原生两阶段架构,解耦几何与纹理表征,确保生成的不仅是视觉“皮囊”,更是结构可靠、可供下游应用的“骨架”,有效规避几何失真,保证生成的准确性、真实感与一致性。

Step1X-3D 的原生 3D 架构

几何生成模型基于 FLUX MMDiT 结构和 Rectified flow 算法直接对 3D 表示生成进行建模

纹理生成模型基于预训练的 Diffusion model,通过单视图和 3D 几何信息指导,生成多视角一致的纹理信息

  • 几何塑形更精准

几何生成的核心在于采用为 3D 特性深度优化的创新混合 VAE-DiT 架构。该架构负责生成 TSDF 内部表示,确保产出的 3D 模型结构完整、无破面漏点;同时通过引入锐利边缘采样(Sharp Edge Sampling)等技术,精准捕捉并还原物体的丰富几何细节。

几何示例:覆盖硬边与曲面结构

  • 纹理细节更生动

纹理生成则基于强大的 SD-XL 模型进行深度定制与优化。通过几何条件(利用法线与位置信息)的精准引导,以及潜在空间多视图同步技术,实现了与几何模块的高效协同。确保生成的纹理不仅色彩饱满、质感生动逼真,更能跨越多视图保持高度一致,与复杂三维表面精密贴合,有效避免常见的扭曲与接缝瑕疵。

纹理示例:呈现清晰一致的表面纹理 3、控制简单、效果可调

Step1X-3D 显著提升了 3D 内容生成的可控性与易用性。其关键在于,VAE-Diffusion 整体架构在设计上与主流 2D 生成模型(如 Stable Diffusion)保持了高度一致性,从而能够无缝引入并应用成熟的 2D 控制技术(如轻量化的 LoRA 微调)。

因此用户可以对生成 3D 资产的对称性、表面细节(如锋利度、平滑度)等多种属性进行直观、精细的调控,让创作更精准地符合用户意图。

对比图 1:对称性控制效果

对比图 2:表面细节控制效果(锋利 / 平滑)

  • 性能评估

为了客观评估 Step1X-3D 的实际效果,我们通过一个自建的综合测试(包含 110 个多样化测试用例),对 Step1X-3D 进行了严格的定量与定性评估,同时与多款主流模型进行全面对比。

结果显示:在自动评估中,Step1X-3D 在多项关键维度上均表现出色。

在与主流 3D 模型的对比评测中,特别是在衡量内容与输入语义一致性的核心指标 CLIP-Score 上,Step1X-3D 取得了当前所有对比模型中的最高分,为开源社区提供了极具竞争力的 3D 生成方案。

不同 3D 模型测评对比数据

Online Demo:https://huggingface.co/spaces/stepfun-ai/Step1X-3D

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

华-通-交易交易平台是正规吗?... 华-通-交易交易平台是正规吗?在华-通-交易交易平台合法吗?答案能退!已协助数万人追回,咨询不收费!...
可怕!北京和众汇富科技怎么样荐... 可怕!北京和众汇富科技怎么样荐股不赚反亏欺骗股友!可以能退!怎么退款流程及注意事项公布!误导性宣传欺...
必看』北京和众汇富科技交费后与... 必看』北京和众汇富科技交费后与宣传差距大,详细处理步骤分享投资有风险,投资需谨慎!针对网上素未谋面的...
当心!海能投顾怎么样?吹嘘收益... 当心!海能投顾怎么样?吹嘘收益诱骗交费,已维权退费!投资有风险,投资需谨慎!针对网上素未谋面的网友、...
金鳞订购APP交易平台是正规吗...   金鳞订购APP交易平台是正规吗?在金鳞订购APP亏损了怎么追回来?可以退!教你一招快速追回!  ...
金.证投顾股民买了炒股会员服务... 金.证投顾股民买了炒股会员服务,交费荐股被能退款!29800元已退费! 证券投资咨询行业的本质在于为...
当心!北京和众汇富科技误导性宣... 当心!北京和众汇富科技误导性宣传、承诺收益、无证投顾提供服务,交费股民赶紧申请退费!投资有风险,投资...
掌-上-银牛APP交易平台合法...   掌-上-银牛APP交易平台合法吗?在掌-上-银牛APP输的钱可以要回来吗安全吗?可以全额!全额被...
智易购APP交易平台正规吗?在...  智易购APP交易平台正规吗?在智易购APP亏损可以要白银吗安全吗?可以全额!教你1招追回损失,咨询...
惊异』神光投顾正规合法吗?忽悠... 惊异』神光投顾正规合法吗?忽悠投资者购买服务后一直推荐烂股!服务费已追回!投资有风险,投资需谨慎!针...
微银订购APP交易软件合法吗?... 微银订购APP交易软件合法吗?在微银订购APP亏损能退款吗?当然可以依法退款!退款流程详解!投资者投...
被骗!海能投资退款怎么退?虚假... 被骗!海能投资退款怎么退?虚假宣传欺骗股民,交会员费真相揭秘,有内部票都是的投资有风险,投资需谨慎!...
上海海能投顾打广告荐牛股的,从... 上海海能投顾打广告荐牛股的,从被骗到成功退款,我经历了这些步骤! 在监管的灰色边缘,众多投资顾问依然...
富禄订购app交易平台合法吗?... 富禄订购app交易平台合法吗?在富禄订购app亏损了怎么退?可以退!教您如何止损/快速追金!我们是资...
举报!海能投顾荐股票真相曝光,... 举报!海能投顾荐股票真相曝光,29800换来的都是垃圾股,被骗亏损真相曝光已退费投资有风险,投资需谨...
掌-上-生财APP交易平台是正...   掌-上-生财APP交易平台是正规吗?在掌-上-生财APP亏损了怎么追回来?可以全额!全额被骗追回...
当心!云南约牛证券靠谱吗?事实... 当心!云南约牛证券靠谱吗?事实清楚依法追回服务费!所有股民引以为戒。投资有风险,投资需谨慎!针对网上...
上海汇正财经业务员夸大荐股收益... 上海汇正财经业务员夸大荐股收益,投顾服务费误导真相曝光!被误导交费后亏损皆可退费! 可以退!很多投资...
雪花订购APP交易平台正规吗?... 雪花订购APP交易平台正规吗?在雪花订购APP亏损了怎么退?可以退!教你一招快速追回! 期货和现货的...
必看』云南约牛软件夸大不实宣传... 必看』云南约牛软件夸大不实宣传诱导消费者,交费炒股被骗经历讲述!服务费能退投资有风险,投资需谨慎!针...
拇指订购APP交易软件是正规吗... 拇指订购APP交易软件是正规吗?在拇指订购APP输的钱可以要回来吗安全吗?当然可以依法退款!退款流程...
哈易购APP交易平台是合法吗?...  哈易购APP交易平台是合法吗?在哈易购APP交易平台合法吗?答案能退!教你一个简单方法找回!投资有...
被骗!山东神光服务费被骗怎么办... 被骗!山东神光服务费被骗怎么办?简单方法,帮你追回!投资有风险,投资需谨慎!针对网上素未谋面的网友、...
震惊』云南约牛证券行业黑幕曝光... 震惊』云南约牛证券行业黑幕曝光,误导股民交费,费用可依法追回!投资有风险,投资需谨慎!针对网上素未谋...
萝卜订购APP交易平台合法吗?... 萝卜订购APP交易平台合法吗?在萝卜订购APP交易平台合法吗?当然可以依法退款!全额被骗追回损失!现...