通过构建一个包含物体单张RGB图片及其对应高精度、水密性3D打印模型的大规模配对数据集,可以为深度学习模型提供训练基础,使其学习从二维图像信息推断三维空间几何。这一数据集主要适用于开发一键式“3D扫描到打印”的移动应用、快速产品原型制作、个人物品的数字化复制以及数字文保等领域。利用该数据训练出的模型,能够让普通用户仅通过拍摄照片就能生成可直接用于3D打印的模型文件,从而极大地普及了3D打印技术,解决了用户缺乏专业三维建模技能而无法创造自定义打印内容的核心痛点。
从单张RGB图片生成可3D打印的模型是连接现实世界与数字制造的桥梁。具体过程包括:(1)数据收集:用户使用普通相机或手机拍摄目标物体的一张RGB图片(I_rgb)。(2)数据处理:将输入的RGB图片送入一个预训练的图像编码器中,以提取包含物体形状、纹理和空间信息的深度特征向量。特征向量通过公式 F_image = Encoder_image(I_rgb) 提取,其中 F_image 为图像特征向量,Encoder_image 为图像编码器。(3) 模型构建:使用提取的图像特征向量作为输入,设计并搭建一个深度几何解码模型,该模型专门用于生成适合3D打印的隐式三维表示。根据公式 SDF = Decoder_3D(F_image) 从图像特征中解码出三维模型的SDF表示,其中 SDF为三维模型,Decoder_3D 为三维形状解码器。生成模型的几何准确度通常通过与真实模型的对比来评估,关键的评估指标包括交并比(Intersection over Union, IoU)和倒角距离(Chamfer Distance, CD)。此方法适用于快速将真实物体数字化并转化为可打印文件,实现了“所见即所得”的3D打印体验。
| 字段名 | 类型 | 描述 |
|---|---|---|
编号 |
-- | -- |
RGB图片 |
-- | -- |
图像特征向量 |
-- | -- |
三维模型 |
-- | -- |
IoU |
-- | -- |
| fieldName | exampleValue |
|---|---|
| 编号 | V-20250904-SH0000 |
| RGB图片 | data\V-20250904-SH0000\rgb_image.png |
| 图像特征向量 | data\V-20250904-SH0000\feature.npy |
curl -H "Authorization: Bearer YOUR_API_KEY" \
http://localhost:3001/api/v1/datasets/6641946