多尺度特征融合的透明物体深度图像快速修复方法

摘要：

透明物体是日常生活中常见的事物,具有独特的视觉特性,这些特性使得标准的视觉3D传感器较难对其进行准确的深度估计.在大多数情况下,视觉3D传感器捕获的深度信息表现为透明物体后面的背景的深度值或大面积的深度缺失.为了对深度图像中透明物体的深度缺失进行快速修复,提出一种基于语义分割和多尺度融合的透明物体深度图像快速修复的方法,使用轻量级实时语义分割预测出透明物体的遮罩,剔除深度场景图像中该部分的错误深度信息,对彩色图像和剔除错误信息后的深度图像进行多尺度的特征提取和特征融合,完成对透明物体的深度图像快速修复.本文在Clear Grasp数据集上算法进行了效果验证.该数据集包含了5万多组RGB-D图像.实验结果表明,文中方法对透明物体深度的修复在度量指标MAE,δ1.05和δ1.25上,分别取得了0.027,72.98和98.04的结果,均优于现有方法,并且在效率上有较好的提升.

关键词：透明物体、深度图像修复、语义分割、特征融合

所属期刊栏目：35

分类号：TP391.72(计算技术、计算机技术)

资助基金：广东省自然科学基金项目;广东省自然科学基金项目;中央高校基本科研业务费;国家自然科学基金

在线出版日期：2023-04-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：312-319