计算机科学与探索

作者：梁达勇，陈俊洪，朱展模，黄可思，刘文印

单位：广东工业大学 计算机学院，广州 510006

关键词：像素级融合,卷积神经网络,点云特征融合,6DoF姿态估计

为了解决目前机器人在物体被遮挡以及光照不足的环境下难以实现精准6DoF姿态估计的问题，提出了一个基于像素级特征融合的神经网络框架。该框架包含三个模块，分别为RGB特征提取网络模块、像素融合结构模块以及6D姿态回归网络模块。其中RGB特征提取网络主要用于分割目标物体并进行特征的提取；像素融合结构负责将RGB特征和三维多视角特征进行融合；最后一个模块将三维点云像素进行融合，并输出物体6D姿态结构。通过在YCB-Video数据集、LINEMOD数据集以及处理后的YCB-Occlusion数据集上的实验证明，所提出的像素级融合网络能在物体被遮挡以及物体点云数据丢失等情况下有效预测出物体的6D姿态，并且其计算效率在损失少量精确度的情况下比其他网络提高了上百倍，且具有较强的鲁棒性。

来源：2020年第12期

《计算机科学与探索》期刊编辑部

查看计算机科学与探索杂志2020年第12期