科研之友
微信
新浪微博
Facebook
分享链接
摘要
由单幅图像重建三维结构并感知三维对象的语义理解极具挑战性。针对单幅图像难以直接生成三维重建点云问题，提出一种融合Point Net与3D-LMNet的联合优化网络模型进行三维重建并完成语义分割。首先基于3D-LMNet网络进行训练生成三维点云，并完成局部分割，同时，对网络损失函数进行联合优化来预测分割点云。然后，通过分割点云的语义信息改善重建效果，生成带有语义分割信息的三维点云重建模型。最后，针对联合训练中真值点云和预测点云类别标签无点对点的对应关系问题，引入联合优化损失函数来提高重建和分割效果，生成最终三维重建模型。通过在ShapeNet数据集上实验验证，并与PointNet和3D-LMNet单独训练相比，本文模型在m Io U上提高了4.23%，在CD和EMD上分别降低了7.97%和6.04%，联合优化网络明显改善了重建和分割的点云模型。
- 单位
