用于合成图像的图像处理设备及其控制方法和存储介质与流程

实施例的一个公开方面涉及用于将从图像传感器输出的多个图像进行合成并进行用于扩展图像的动态范围的图像处理的图像处理设备以及该图像处理设备的控制方法。

背景技术：

1、传统上已经存在用于将利用不同曝光量所拍摄的多个图像进行合成的合成处理技术。例如，连接具有不同曝光量的图像的适当曝光信号，这使得能够获取没有过度曝光或曝光不足的图像。随着近年来提高的传感器性能，图像传感器包括用于来自单位像素的输出信号的两个不同的列电路，并且具有列电路中的放大器的附加增益。这样的图像传感器(双增益输出(dual gain output，dgo))能够输出具有不同增益的图像。该图像传感器可以在一次曝光中输出具有不同增益的两个不同图像(高增益图像和低增益图像)。基于通过dgo的两个图像合成与时分曝光中所获取的两个图像的合成之间的比较，dgo具有不需要对准处理并且针对移动物体拍摄高度有效的优点。因此，dgo与图像合成兼容。作为用于合成具有不同曝光量的图像的技术的示例，日本特开2005-72965讨论了用于通过合成低曝光图像和高曝光图像来扩展动态范围的技术。

技术实现思路

1、根据实施例的方面，图像处理设备包括：图像传感器，其被配置为输出通过在一次曝光中应用不同增益而获得的多个图像，在一次曝光中，用于累积电荷的电荷累积部的容量对于全部图像是共同的；第一合成单元，其被配置为获取多个图像，并且通过利用最暗图像的明度调整多个图像中的除最暗图像以外的图像的明度来进行合成；第二合成单元，其被配置为通过利用最亮图像的明度调整多个图像中的除最亮图像以外的图像的明度来进行合成；以及合成方法选择单元，其被配置为选择第一合成单元或第二合成单元。该图像处理设备还包括：字典生成单元，其被配置为基于教导数据和网络结构限制来生成用于被摄体检测的字典数据；以及摄像设备，用于基于该字典生成单元所生成的字典数据来进行被摄体检测，并且使在该被摄体检测中所检测到的被摄体经受预定摄像控制。

2、通过参考附图对示例性实施例的以下描述，本公开的进一步的特征将变得明显。

技术特征：

1.一种图像处理设备，包括：

2.根据权利要求1所述的图像处理设备，其中，所述合成方法选择单元通过使用所述多个图像其中至少之一来计算动态范围，并且根据所计算出的动态范围来进行所述选择。

3.根据权利要求2所述的图像处理设备，

4.根据权利要求2所述的图像处理设备，

5.根据权利要求1所述的图像处理设备，还包括：

6.根据权利要求1所述的图像处理设备，其中，所述第二合成单元包括被配置为基于线性图像来进行合成的合成单元以及被配置为基于非线性图像来进行合成的合成单元。

7.根据权利要求6所述的图像处理设备，其中，所述线性图像是raw图像。

8.根据权利要求6所述的图像处理设备，其中，所述非线性图像是yuv格式的。

9.根据权利要求1所述的图像处理设备，其中，所述合成方法选择单元基于是否记录合成之后的线性图像来进行所述选择。

10.根据权利要求1所述的图像处理设备，其中，所述合成方法选择单元基于摄像设备所拍摄的图像的帧频来进行所述选择。

11.根据权利要求1所述的图像处理设备，还包括：

12.根据权利要求11所述的图像处理设备，其中，所述摄像单元具有堆叠层结构，通过对在一次曝光中获取的图像应用不同增益来生成所述多个图像，并且将所述图像输出到所述获取单元。

13.一种图像处理设备的控制方法，所述控制方法包括：

14.一种非暂时性计算机可读存储介质，其存储有用于使计算机执行根据权利要求13所述的图像处理设备的控制方法的程序。

技术总结
本发明涉及用于合成图像的图像处理设备及其控制方法和存储介质。该图像处理设备包括：图像传感器，其被配置为输出通过在一次曝光中应用不同增益而获得的多个图像，在一次曝光中，用于累积电荷的电荷累积部的容量对于全部图像是共同的；第一合成单元，其被配置为获取多个图像，并且通过利用最暗图像的明度调整多个图像中的除最暗图像以外的图像的明度来进行合成；第二合成单元，其被配置为通过利用最亮图像的明度调整多个图像中的除最亮图像以外的图像的明度来进行合成；以及合成方法选择单元，其被配置为选择第一合成单元或第二合成单元。

技术研发人员：高桥良辅
受保护的技术使用者：佳能株式会社
技术研发日：
技术公布日：2024/1/14