基于多策略和交叉特征融合的显著物体检测方法

文档序号:26434907发布日期:2021-08-27 13:32阅读:来源:国知局

技术特征:

1.一种基于多策略和交叉特征融合的显著物体检测方法,其特征在于,包括以下步骤:

选取多幅数据集的rgb彩色图,depth深度图和groundtruth标签图,构成训练集;

构建卷积神经网络,所述卷积神经网络采用自顶向下的高级特征监督低级特征融合的方式;

将所述训练集输入到所述卷积神经网络,对所述卷积神经网络训练;

多次训练,得到卷积神经网络模型。

2.根据权利要求1所述的一种基于多策略和交叉特征融合的显著物体检测方法,其特征在于,所述卷积神经网络引入深度优化模块提高图像质量,将多策略融合模块得到的特征图经交叉融合模块的交叉融合,捕获联合特征。

3.根据权利要求2所述的一种基于多策略和交叉特征融合的显著物体检测方法,其特征在于,所述深度优化模块的结构如下:

第一个最大池化层,第一个卷积块,第一个激活层,第二个卷积块和第二个激活层依次连接后与所述第一个最大池化层做像素相乘后输入到第二个最大池化层,所述第二个最大池化层后依次连接有第三个卷积块和第三个激活层,所述第三个激活层的输出与所述第二个最大池化层做像素相乘后输入到第三个最大池化层,所述第三个最大池化层的输出与所述第一个最大池化层的输出做像素相加作为最终输出。

4.根据权利要求2所述的一种基于多策略和交叉特征融合的显著物体检测方法,其特征在于,所述多策略融合模块对深度特征和rgb特征分别做像素相减,像素相加,像素相乘操作,并在通道维度上取平均值和最大值;将像素相减,像素相加,像素相乘操作以及通道维度上的平均值和最大值做像素相加作为第一输出;上一层融合特征经上采样后与所述第一输出做像素相加作为最终输出。

5.根据权利要求2所述的一种基于多策略和交叉特征融合的显著物体检测方法,其特征在于,所述交叉融合模块的结构如下:

第二输入经特征提取与第一输入做像素相加得到的结果记为经第一卷积块的输出与做像素相加得到m,m与m做像素相加,像素相加的结果作为与m做像素相乘的输入,像素相乘的结果作为与m做像素相减的输入,像素相减的结果作为与m做通道叠加的输入,通道叠加的输出经过第二卷积块后作为最终输出。


技术总结
本发明公开了一种基于多策略融合的显著性物体检测方法,涉及深度学习领域。其在训练阶段,构建卷积神经网络,其隐层包括10个神经网络卷积块、5个多策略融合块、4个交叉特征融合块;使用原始的RGB彩色图和Depth深度图输入到卷积神经网络中进行训练,得到对应的显著体检测图;再通过计算原始的预测图与对应真实的显著体标签图(Ground Truth)的损失函数值,获得卷积神经网络分类训练模型的最优权值矢量和偏置项;在测试阶段,将待检测的显著体的RGB彩色图和对应的Depth深度图一起输入到卷积神经网络分类训练模型中,得到预测显著体检测图像;优点是提高了RGB‑D显著体检测效率和准确度。

技术研发人员:周武杰;孙帆;强芳芳;许彩娥
受保护的技术使用者:浙江科技学院
技术研发日:2021.06.30
技术公布日:2021.08.27
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1