图像拼接方法、装置、电子设备、介质及产品与流程

本公开实施例涉及图像处理，尤其涉及一种图像拼接方法、装置、电子设备、介质及产品。

背景技术：

1、全景图像能够用更广的视角呈现拍着场景信息，有效且全面地表达成像对象的信息。目前，多采用鱼眼相机阵列，拍摄大广角图像并进行图像拼接，以得到拍摄场景最终的全向立体视图(omni-directional stereo image，ods)。

2、但是，经过拼接最终得到的全景图像的拼接处过度不自然，可能会出现图像的前景与背景邻接处变形的情况，图像效果还需进一步优化。

技术实现思路

1、本公开提供了一种图像拼接方法、装置、电子设备、介质及产品，可以减少图像拼接区域中前景与背景像素之间的干扰，使全景立体图像的拼接区域拼接效果更加自然，提升图像视觉效果。

2、第一方面，本公开实施例提供了一种图像拼接方法，该方法包括：

3、获取预设成像设备阵列采集得到的一组待处理图像，并针对所述预设成像设备阵列中每两个相邻的成像设备对应的待处理图像对进行双向光流估计，得到第一光流估计结果；

4、基于所述第一光流估计结果和所述待处理图像对对应的空镜背景图像对的第二光流估计结果进行图像映射，并将图像映射结果进行融合，得到所述待处理图像对对应的左眼待拼接图像片段和右眼待拼接图像片段；

5、基于每一个所述左眼待拼接图像片段和每一个所述右眼待拼接图像片段进行图像拼接，以得到所述一组待处理图像对应的目标全向立体视图。

6、第二方面，本公开实施例还提供了一种图像拼接装置，该装置包括：

7、图像获取模块，用于获取预设成像设备阵列采集得到的一组待处理图像，并针对所述预设成像设备阵列中每两个相邻的成像设备对应的待处理图像对进行双向光流估计，得到第一光流估计结果；

8、图像片段处理模块，用于基于所述第一光流估计结果和所述待处理图像对对应的空镜背景图像对的第二光流估计结果进行图像映射，并将图像映射结果进行融合，得到所述待处理图像对对应的左眼待拼接图像片段和右眼待拼接图像片段；

9、图像片段拼接模块，用于基于每一个所述左眼待拼接图像片段和每一个所述右眼待拼接图像片段进行图像拼接，以得到所述一组待处理图像对应的目标全向立体视图。

10、第三方面，本公开实施例还提供了一种电子设备，所述电子设备包括：

11、一个或多个处理器；

12、存储装置，用于存储一个或多个程序，

13、当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本公开实施例任一所述的图像拼接方法。

14、第四方面，本公开实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如本公开实施例任一所述的图像拼接方法。

15、第五方面，本公开实施例还提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现如本发明实施例中任一所述的图像拼接方法。

16、本公开实施例，通过获取预设成像设备阵列采集得到的一组待处理图像，并针对所述预设成像设备阵列中每两个相邻的成像设备对应的待处理图像对进行双向光流估计，得到第一光流估计结果；基于所述第一光流估计结果和所述待处理图像对对应的空镜背景图像对的第二光流估计结果进行图像映射，即在图像映射过程中纠正拼接位置处前景和背景像素点的光流信息，进而将图像映射结果进行融合，得到所述待处理图像对对应的左眼待拼接图像片段和右眼待拼接图像片段；基于每一个所述左眼待拼接图像片段和每一个所述右眼待拼接图像片段进行图像拼接，以得到所述一组待处理图像对应的目标全向立体视图。本公开实施例的技术方案解决了目前的全景立体视图中拼接部位不够自然的问题，可以避免图像拼接后可能会出现前景与背景边缘的扭曲等情况，使全景立体图像的拼接区域拼接效果更加自然，提升图像效果。

技术特征：

1.一种图像拼接方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，基于所述第一光流估计结果和所述待处理图像对对应的空镜背景图像对的第二光流估计结果进行图像映射，并将图像映射结果进行融合，得到所述待处理图像对对应的左眼待拼接图像片段和右眼待拼接图像片段，包括：

3.根据权利要求2所述的方法，其特征在于，基于所述第二光流估计结果更新各所述目标左眼图像片段和各所述目标右眼图像片段中背景像素点的光流，包括：

4.根据权利要求2所述的方法，其特征在于，将经过光流更新的各目标左眼图像片段和各目标右眼图像片段进行图像融合，得到所述待处理图像对对应的左眼待拼接图像片段和右眼待拼接图像片段，包括：

5.根据权利要求2所述的方法，其特征在于，基于各所述左眼图像片段和所述右眼图像片段对应的所述第一光流估计结果进行图像映射，得到所述各待处理图像在目标视角范围的目标左眼图像片段和目标右眼图像片段，包括：

6.根据权利要求1-5中任一所述的方法，其特征在于，在得到第一光流估计结果之后，所述方法还包括：

7.根据权利要求1-5中任一所述的方法，其特征在于，在获取预设成像设备阵列采集得到的一组待处理图像之前，所述方法还包括：

8.根据权利要求1所述的方法，其特征在于，基于每一个所述左眼待拼接图像片段和每一个所述右眼待拼接图像片段进行图像拼接，以得到所述一组待处理图像对应的目标全向立体视图，包括：

9.一种图像拼接装置，其特征在于，包括：

10.一种电子设备，其特征在于，所述电子设备包括：

11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-8中任一所述的图像拼接方法。

12.一种计算机程序产品，包括计算机程序，其特征在于，所述计算机程序在被处理器执行时实现如权利要求1-8中任一项所述的图像拼接方法。

技术总结
本公开实施例公开了一种图像拼接方法、装置、电子设备、存储介质及产品，其中，方法包括：获取预设成像设备阵列采集得到的一组待处理图像，并针对预设成像设备阵列中每两个相邻的成像设备对应的待处理图像对进行双向光流估计，得到第一光流估计结果；基于第一光流估计结果和待处理图像对对应的空镜背景图像对的第二光流估计结果进行图像映射，并将图像映射结果进行融合，得到待处理图像对对应的左眼待拼接图像片段和右眼待拼接图像片段；基于每一个左眼待拼接图像片段和每一个右眼待拼接图像片段进行图像拼接，以得到一组待处理图像对应的目标全向立体视图。本公开实施例的技术方案可以使全景立体图像的拼接区域拼接效果更加自然，提升视觉效果。

技术研发人员：田明哲,张东波,焦少慧
受保护的技术使用者：北京字跳网络技术有限公司
技术研发日：
技术公布日：2024/1/25