一张图生成完整三维物体,六亿参数模型在消费级显卡上三秒出结果

首页 / AI资讯 / AI建模

0:00
0:00
1x
定时

10月30日前后,一家叫Speridlabs的研究团队开源了Idol,一个从单张图片生成完整三维物体的模型。它的自我介绍里有几个数字很扎眼:600M参数、从零预训练、显存占用低于7.2GB、3秒生成100万个高斯泼溅点、Apache 2.0协议、权重代码与演示全开。有用户在Hugging Face的在线空间里拿一张机器鸭的图试了一遍,评价是效果完全没有让人失望。

它生成的是"看不见的那一面"

从一张照片还原三维,有两种完全不同的路径。一条是测量:多角度拍摄、特征匹配、三角化,得到的是照片拍到的那部分几何,没拍到的区域是空洞。另一条是生成:模型根据已见部分推断未见部分,输出的是一个完整但包含猜测的物体。

Idol走的是第二条。它的输出是完整的三维物体,包括背面、底面和内部结构。这在工程上意味着什么?意味着它的几何不是实测值,而是基于训练分布做出的合理补全。对一个马克杯,模型知道背面大概率也有一个把手;对一个造型奇特的雕塑,这个推断可能完全错误。

把这条界线讲清楚,才能正确使用它。做概念设计、做资产占位、做电商预览,生成式补全完全够用;做逆向工程、做尺寸检验、做装配仿真,必须用测量式的方案。两者的输入看起来都是"一张图",输出的可信度差一个量级。

600M参数与7.2GB显存改变了谁能用

三维生成领域的模型体量这几年一直在往上走,动辄数十亿参数,跑一次需要数据中心卡。Idol把参数压到600M,显存需求压到7.2GB以下,这个门槛意味着主流的消费级显卡都能跑,一台带独立显卡的工作站就能做本地推理。

小体量能work,靠的是架构选择而不是单纯的压缩。它是一个3D扩散Transformer,直接在高斯泼溅表示上做去噪,而不是先生成网格再补细节。少了一层表示转换,参数需求自然低一档,代价是输出的格式是泼溅点云而不是带拓扑的网格。

从零预训练这一点也值得单独说。基于已有大模型微调是当下主流做法,成本低、见效快,但能力上限被底座锁死;从零训练的数据与算力投入高得多,换来的是对表示形式的完全控制。团队没有披露训练数据规模与算力投入,这两个数字决定了它是可持续的路线还是一次性实验。

100万点、3秒,对应的是预览而不是交付

100万个高斯泼溅点是什么概念?足以把一个物体的轮廓、材质感和半透明边缘渲染得相当可信,在实时渲染里可以做到接近照片的观感。3秒的生成时间,让它能进入"边聊边看"的交互节奏。

但它不是可以直接进生产管线的资产。游戏引擎与CAD要的是带拓扑的网格,需要UV、需要法线、需要封闭的流形才能做碰撞与布尔运算。泼溅点云要变成可用网格,中间还要过一层重建与重拓扑,这层工作目前没有自动化方案能完全替代人工。

所以它最现实的位置是"中间产物":设计师用它在几秒内看到想法立起来的样子,选定方向之后再走正式的建模流程。这个位置听起来不高,但它把"想法的第一次可视化"从几小时压到几秒,对创意流程的影响比很多指标提升更直接。

开源到Apache 2.0,商业含义在哪

Apache 2.0允许商用、允许修改、允许闭源分发,只要求保留版权声明。对一个基础模型来说,这是相当宽松的选择,与近期一些把权重开放但换成自定义协议、要求商业托管另签授权的做法形成对比。

宽松协议对生态是加速器。做电商3D展示、做游戏资产工具、做AR试摆的团队可以直接把它嵌进产品,不必先谈授权。这类团队的数量远大于有能力自己训模型的公司,他们决定了一个模型能不能变成事实标准。

风险也随之转移给使用者。模型输出的三维资产,其版权归属在多数司法辖区仍不清晰;如果训练数据里包含受保护的设计,生成结果可能与某个现有产品高度相似。商用前做一次相似度筛查,正在成为这个行业的常规动作。

还有一层影响在供给侧。当单图生成三维变成一张消费级显卡就能跑的能力,上游卖的是什么?是数据、是工作流、是把泼溅点云转成可交付网格的那套工具。这也解释了为什么近期一批创业公司把方向从"生成模型"转向"资产管线",模型正在变成零件,管线才是产品。对使用方来说,这意味着选型的重点要从"谁的生成质量高"转向"谁的输出能接进现有流程"。

单图生成这条路上的三种解法

把一张图变成三维,业内目前有三条并行的路线,各自的输出格式完全不同。第一条是直接生成辐射场或高斯泼溅,Idol走的是这条,优点是渲染质量高、生成快,缺点是不带拓扑,进引擎前要转换。

第二条是生成带贴图的网格,输出封闭的、可以直接做碰撞与打印的模型。这条路线离生产管线最近,但生成难度也最高,因为拓扑质量很难保证,经常出现破面与自交,需要后处理修补。

第三条不生成几何本身,而是让大模型写一段可执行的建模脚本,在Blender或CAD里跑出带参数的模型。它的优势是尺寸可编辑、结构可控,劣势是对曲面复杂的物体几乎无能为力,手部和褶皱往往要靠人补。三条路线不是替代关系,选哪条取决于下游要拿这个模型做什么。

素材来源:Speridlabs官方、Digg、Hugging Face 发布时间:2026-10-31