图像处理方法、设备、存储介质和程序产品与流程

本发明涉及人工智能，尤其涉及一种图像处理方法、设备、存储介质和程序产品。

背景技术：

1、图像配准(image registration)就是将不同拍摄条件下获取到的图像进行匹配的过程。也即是指一幅图像寻求一种空间变换,使它与另一幅图像上的对应点达到空间上的一致。这种一致可以是指图像中的同一对象在配准后的两张图像上有相同的空间位置。其中，拍摄条件可以包括成像设备、拍摄天气、拍摄照度、摄像位置和拍摄角度等等。并且图像配准已广泛应用于遥感领域、医学领域等多个领域中。

2、在实际中，如何提高图像配准的效果就成为一个亟待解决的问题。

技术实现思路

1、有鉴于此，本发明实施例提供一种图像处理方法、设备和存储介质，用以提高图像配准效果。

2、第一方面，本发明实施例提供一种图像处理方法，包括：

3、确定参考图像和待配准图像各自的第一特征图，所述第一特征图包含图像的图像特征以及图像中相同邻域内的信息单元之间的相似度；

4、根据所述参考图像和所述待配准图像各自的第一特征图确定变形场；

5、根据所述变形场对所述待配准图像进行配准，以得到配准后图像。

6、第二方面，本发明实施例提供一种图像处理方法，包括：

7、获取对同一图像进行强度变换后得到的第一训练图像和第二训练图像；

8、将所述第一训练图像和所述第二训练图像作为训练样本，以由所述特征提取模型分别输出所述第一训练图像和所述第二训练图像各自的第三特征图，所述第三特征图包含训练图像的图像特征以及训练图像中相同邻域内的信息单元之间的相似度；

9、基于对比学习，以及所述第三特征图中的不同信息单元包含的特征信息之间的相似度，训练所述特征提取模型。

10、第三方面，本发明实施例提供一种图像处理方法，包括：

11、接收用户发送的图像处理请求，所述图像处理请求中包括携带有参考图像和待配准图像的图像处理任务；

12、确定参考图像和待配准图像各自的第一特征图，所述第一特征图包含图像的图像特征以及图像中相同邻域内的信息单元之间的相似度；

13、根据所述参考图像和所述待配准图像各自的第一特征图确定变形场；

14、根据所述变形场对所述待配准图像进行配准；

15、向所述用户发送配准后图像。

16、第四方面，本发明实施例提供一种图像处理方法，包括：

17、响应于用户的输入操作，展示所述用户输入的参考图像和待配准图像；

18、展示所述待配准图像对应的配准后图像；

19、其中，所述配准后图像的生成过程包括：

20、根据所述参考图像和所述待配准图像各自的第一特征图确定变形场，所述第一特征图包含图像的图像特征以及图像中相同邻域内的信息单元之间的相似度；

21、根据所述变形场对所述待配准图像进行配准，以得到所述配准后图像。

22、第五方面，本发明实施例提供一种电子设备，包括处理器和存储器，所述存储器用于存储一条或多条计算机指令，其中，所述一条或多条计算机指令被所述处理器执行时实现上述第一方面至第四方面中任一方面中的图像处理方法。该电子设备还可以包括通信接口，用于与其他设备或通信系统通信。

23、第六方面，本发明实施例提供了一种非暂时性机器可读存储介质，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器至少可以实现如上述第一方面至第四方面中任一方面中的图像处理方法。

24、第七方面，本发明实施例提供了一种程序产品，所述计算机程序产品包括计算机程序或指令，当所述计算机程序或指令被处理器执行时，致使所述处理器能实现如上述第一方面至第四方面中任一方面中的图像处理方法。

25、本发明实施例提供的图像处理方法中，获取参考图像和待配准图像，并进一步确定两者各自的第一特征图，该第一特征图中包含图像的图像特征以及图像中相同邻域内信息单元之间的相似度。然后，根据二者各自对应的第一特征图确定待配准图像对应的变形场，并利用该变形场对待配准图像进行形变，以得到配准后图像也即是完成了参考图像和待配准图像之间的配准。

26、可见，上述配准过程中使用了一种新的特征图，该相较于传统的特征图，该特征图在包含图像特征此基础上还包含图像中同一邻域内信息单元之间的相似度。该相似度可以反映图像中不同信息单元之间的辨别性，而利用该辨别性又可以保证得到变形场的准确性，也就可以保证图像配准的效果。

技术特征：

1.一种图像处理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述待配准图像和所述参考图像包括在不同拍摄条件下对相同对象拍得的三维图像；所述参考图像和所述待配准图像各自的第一特征图具有相同的数据结构。

3.根据权利要求2所述的方法，其特征在于，所述确定参考图像和待配准图像各自的第一特征图，包括：

4.根据权利要求1至3中任一项所述的方法，其特征在于，所述确定参考图像和待配准图像各自的第一特征图，包括：

5.根据权利要求4所述的方法，其特征在于，所述根据所述参考图像的第二特征图，确定所述参考图像的第一特征图，包括：

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

7.根据权利要求1所述的方法，其特征在于，所述根据所述参考图像和所述待配准图像各自的第一特征图确定变形场，包括：

8.根据权利要求1所述的方法，其特征在于，所述根据所述变形场对所述待配准图像进行配准，以得到配准后图像，包括：

9.根据权利要求3所述的方法，其特征在于，所述方法还包括：

10.根据权利要求9所述的方法，其特征在于，所述第一训练图像和所述第二训练图像包括在不同拍摄条件下对相同对象拍得的三维图像。

11.一种图像处理方法，其特征在于，包括：

12.一种图像处理方法，其特征在于，包括：

13.一种图像处理方法，其特征在于，包括：

14.一种电子设备，其特征在于，包括：存储器、处理器；其中，所述存储器上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器执行如权利要求1~13中任一项所述的图像处理方法。

15.一种非暂时性机器可读存储介质，其特征在于，所述非暂时性机器可读存储介质上存储有可执行代码，当所述可执行代码被电子设备的处理器执行时，使所述处理器执行如权利要求1~13中任一项所述的图像处理方法。

16.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序或指令，致使所述计算机程序或指令能够实现权利要求1~13中任一项所述的图像处理方法中的步骤。

技术总结
本发明实施例提供一种图像处理方法、设备、存储介质和程序产品，该方法包括：获取参考图像和待配准图像，并进一步确定两者各自的第一特征图，该第一特征图中包含图像的图像特征以及图像中相同邻域内信息单元之间的相似度。然后，根据二者各自对应的第一特征图确定待配准图像对应的变形场，并利用该变形场对待配准图像进行形变，以得到配准后图像也即是完成了参考图像和待配准图像之间的配准。可见，上述配准过程中使用了一种新的特征图，该特征图在包含图像特征此基础上还包含图像中同一邻域内信息单元之间的相似度。该相似度可以反映图像中不同信息单元之间的辨别性，而利用该辨别性又可以保证得到变形场的准确性，也就可以保证图像配准的效果。

技术研发人员：莫志荣,李孜,白云昊,张建鹏,刘伟,周彦捷,闫轲,金达开,吕乐,张灵
受保护的技术使用者：阿里巴巴（中国）有限公司
技术研发日：
技术公布日：2024/5/8