图像处理方法、装置、电子设备及存储介质与流程

本公开涉及图像处理，具体涉及一种图像处理方法、装置、电子设备及存储介质。

背景技术：

1、在医学诊断中，往往需要专业的医疗设备来采集用户的生理参数，以作为身体状况评估的依据，例如可以采用专业的人体图像采集设备来采集人体局部图像，从而据此评估身体状况。人体局部图像可以为舌部图像，而人体图像采集设备是一个密闭的具有补光功能的仪器，其补光灯的亮度和色温范围都有严格的相关标准约束，因此采集的图像能够还原人体局部的真实颜色。目前，随着移动互联网技术的不断发展，医疗诊断也出现了远程诊断的形式，远程诊断时患者只能使用智能手机等终端设备来拍摄人体局部图像，而终端设备拍摄的人体局部图像无法还原人体局部的真实颜色，导致影响身体状况评估的准确性。

技术实现思路

1、为克服相关技术中存在的问题，本公开实施例提供一种图像处理方法、装置、电子设备及存储介质，用以解决相关技术中的缺陷。

2、根据本公开实施例的第一方面，提供一种图像处理方法，应用于具有rgb成像元件和多光谱传感器的终端设备，所述方法包括：

3、获取所述rgb成像元件采集的rgb图像，和所述多光谱传感器采集的光谱图像，其中，所述rgb图像和所述光谱图像的采集时刻相同；

4、根据所述光谱图像，确定所述rgb图像的采集时刻的光源信息；

5、根据所述光源信息，对所述rgb图像进行校正，得到目标图像，其中，所述目标图像的颜色为所述rgb图像对应的真实环境下的颜色。

6、在一个实施例中，所述根据所述光谱图像，确定所述rgb图像的采集时刻的光源信息，包括：

7、根据所述光谱图像和预先标定的光源光谱曲线，确定所述rgb图像的采集时刻的光源信息，其中，所述光谱图像用于表征光谱数据，所述光源光谱曲线用于表征光谱数据与光源信息之间的映射关系。

8、在一个实施例中，还包括：

9、获取所述光谱传感器采集的多个光谱图像样本，以及光谱仪采集的多个光谱参数，其中，所述多个光谱图像样本与所述多个光谱参数一一对应，相互对应的所述光谱图像样本和所述光谱参数的采集时刻相同；

10、根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线。

11、在一个实施例中，所述根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线和反射率曲线，包括：

12、利用下述至少一项反射光谱重建算法，根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线和反射率曲线：伪逆算法、主成分分析算法和深度学习算法。

13、在一个实施例中，所述根据所述光源信息，对所述rgb图像进行校正，得到目标图像，包括：

14、根据所述光源信息，得到所述rgb图像的白平衡矫正参数；

15、利用所述rgb图像的白平衡矫正参数，对所述rgb图像的色彩信息进行校正，得到目标图像。

16、在一个实施例中，所述光源信息包括光源色度信息。

17、在一个实施例中，所述rgb图像包括人体局部图像。

18、在一个实施例中，所述rgb成像元件的视场角和所述多光谱传感器的视场角重合。

19、根据本公开实施例的第二方面，提供一种图像处理装置，应用于具有rgb成像元件和多光谱传感器的终端设备，所述装置包括：

20、获取模块，用于获取所述rgb成像元件采集的rgb图像，和所述多光谱传感器采集的光谱图像，其中，所述rgb图像和所述光谱图像的采集时刻相同；

21、光源模块，用于根据所述光谱图像，确定所述rgb图像的采集时刻的光源信息；

22、校正模块，用于根据所述光源信息，对所述rgb图像进行校正，得到目标图像，其中，所述目标图像的颜色为所述rgb图像对应的真实环境下的颜色。

23、在一个实施例中，所述光源模块具体用于：

24、根据所述光谱图像和预先标定的光源光谱曲线，确定所述rgb图像的采集时刻的光源信息，其中，所述光谱图像用于表征光谱数据，所述光源光谱曲线用于表征光谱数据与光源信息之间的映射关系。

25、在一个实施例中，还包括标定模块，用于：

26、获取所述光谱传感器采集的多个光谱图像样本，以及光谱仪采集的多个光谱参数，其中，所述多个光谱图像样本与所述多个光谱参数一一对应，相互对应的所述光谱图像样本和所述光谱参数的采集时刻相同；

27、根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线。

28、在一个实施例中，所述标定模块用于根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线和反射率曲线时，具体用于：

29、利用下述至少一项反射光谱重建算法，根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线和反射率曲线：伪逆算法、主成分分析算法和深度学习算法。

30、在一个实施例中，所述校正模块具体用于：

31、根据所述光源信息，得到所述rgb图像的白平衡矫正参数；

32、利用所述rgb图像的白平衡矫正参数，对所述rgb图像的色彩信息进行校正，得到目标图像。

33、在一个实施例中，所述光源信息包括光源色度信息。

34、在一个实施例中，所述rgb图像包括人体局部图像。

35、在一个实施例中，所述rgb成像元件的视场角和所述多光谱传感器的视场角重合。

36、根据本公开实施例的第三方面，提供一种电子设备，所述电子设备包括存储器、处理器，所述存储器用于存储可在处理器上运行的计算机指令，所述处理器用于在执行所述计算机指令时实现第一方面所述的图像处理方法。

37、根据本公开实施例的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现第一方面所述的方法。

38、本公开的实施例提供的技术方案可以包括以下有益效果：

39、本公开实施例所提供的图像处理方法，通过获取终端设备的rgb成像元件采集的rgb图像，和终端设备的多光谱传感器采集的光谱图像，可以根据所述光谱图像，确定所述rgb图像的采集时刻的光源信息，最后可以根据所述光源信息，对所述rgb图像进行校正，得到目标图像，也就是还原rgb图像内的被拍摄对象的真实颜色。该方法若应用于拍摄人体局部图像，可以还原人体局部的真实颜色，从而可以根据人体局部图像准确的评估身体状况。

技术特征：

1.一种图像处理方法，其特征在于，应用于具有rgb成像元件和多光谱传感器的终端设备，所述方法包括：

2.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述光谱图像，确定所述rgb图像的采集时刻的光源信息，包括：

3.根据权利要求2所述的图像处理方法，其特征在于，还包括：

4.根据权利要求3所述的图像处理方法，其特征在于，所述根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线和反射率曲线，包括：

5.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述光源信息，对所述rgb图像进行校正，得到目标图像，包括：

6.根据权利要求1所述的图像处理方法，其特征在于，所述光源信息包括光源色度信息。

7.根据权利要求1所述的图像处理方法，其特征在于，所述rgb图像包括人体局部图像。

8.根据权利要求1所述的图像处理方法，其特征在于，所述rgb成像元件的视场角和所述多光谱传感器的视场角重合。

9.一种图像处理装置，其特征在于，应用于具有rgb成像元件和多光谱传感器的终端设备，所述装置包括：

10.根据权利要求9所述的图像处理装置，其特征在于，所述光源模块具体用于：

11.根据权利要求10所述的图像处理装置，其特征在于，还包括标定模块，用于：

12.根据权利要求11所述的图像处理装置，其特征在于，所述标定模块用于根据所述多个光谱图像样本，以及每个光谱图像样本对应的光谱参数，标定所述光源光谱曲线和反射率曲线时，具体用于：

13.根据权利要求9所述的图像处理装置，其特征在于，所述校正模块具体用于：

14.根据权利要求9所述的图像处理装置，其特征在于，所述光源信息包括光源色度信息。

15.根据权利要求9所述的图像处理装置，其特征在于，所述rgb图像包括人体局部图像。

16.根据权利要求9所述的图像处理装置，其特征在于，所述rgb成像元件的视场角和所述多光谱传感器的视场角重合。

17.一种电子设备，其特征在于，所述电子设备包括存储器、处理器，所述存储器用于存储可在处理器上运行的计算机指令，所述处理器用于在执行所述计算机指令时实现权利要求1至8中任一项所述的图像处理方法。

18.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现权利要求1至8中任一项所述的方法。

技术总结
本公开是关于图像处理方法、装置、电子设备及存储介质，所述方法应用于具有RGB成像元件和多光谱传感器的终端设备，所述方法包括：获取所述RGB成像元件采集的RGB图像，和所述多光谱传感器采集的光谱图像，其中，所述RGB图像和所述光谱图像的采集时刻相同；根据所述光谱图像，确定所述RGB图像的采集时刻的光源信息；根据所述光源信息，对所述RGB图像进行校正，得到目标图像，其中，所述目标图像的颜色为所述RGB图像对应的真实环境下的颜色。

技术研发人员：熊清
受保护的技术使用者：北京小米移动软件有限公司
技术研发日：
技术公布日：2024/10/10