一种基于多目标分割的多光谱图像融合方法、装置及设备

文档序号:34722182发布日期:2023-07-07 18:26阅读:来源:国知局

技术特征:

1.一种基于多目标分割的多光谱图像融合方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述采用多目标分割网络对所述目标可见光图像和所述目标红外图像进行多目标语义分割,生成多目标分割图像,包括:

3.根据权利要求2所述的方法,其特征在于,所述采用所述可见光图像编码流对所述目标可见光图像进行特征提取,得到多个尺度的可见光图像特征,包括:

4.根据权利要求2所述的方法,其特征在于,所述采用所述红外图像编码流对所述目标红外图像进行特征提取,得到多个尺度的红外图像特征,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于多光谱图像融合网络提取所述目标可见光图像对应的第一深度特征和所述目标红外图像对应的第二深度特征,通过融合所述第一深度特征、所述第二深度特征和所述多目标分割图像,生成目标融合图像,包括:

6.根据权利要求5所述的方法,其特征在于,所述通过所述融合层中的多目标增强特征融合模块对所述第一深度特征、所述第二深度特征和所述多目标分割图像进行融合,得到融合特征,包括:

7.根据权利要求6所述的方法,其特征在于,所述按照所述显著目标类对所述第一深度特征、所述第二深度特征和所述多目标分割图像进行特征融合,得到背景特征、次要显著目标特征和主要显著目标特征,包括:

8.一种基于多目标分割的多光谱图像融合装置,其特征在于,包括:

9.一种设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。


技术总结
本申请公开了一种基于多目标分割的多光谱图像融合方法、装置及设备,涉及图像处理技术领域,根据多目标分割的类别在特征域对不同目标采用不同的融合方式,产生符合人眼视觉感知图像的同时,有效突出红外图像中的显著目标。所述方法包括:采集可见光图像和红外图像,对可见光图像和红外图像进行图像配准处理,得到已配准的目标可见光图像和目标红外图像;采用多目标分割网络对目标可见光图像和目标红外图像进行多目标语义分割,生成多目标分割图像;基于多光谱图像融合网络提取目标可见光图像对应的第一深度特征和目标红外图像对应的第二深度特征,通过融合第一深度特征、第二深度特征和多目标分割图像,生成目标融合图像。

技术研发人员:郑曰文,向咸旭,应佳成,俞贝楠,沈会良
受保护的技术使用者:浙江大学
技术研发日:
技术公布日:2024/1/13
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1