成像元件、摄像装置、成像元件的工作方法及存储介质与流程

本发明的技术涉及一种成像元件、摄像装置、成像元件的工作方法及程序。

背景技术：

1、日本特开2017-188760号公报中公开了一种层叠有存储器基板和信号处理基板而成的层叠型成像元件。存储器基板具有临时存储像素基板所输出的像素信号的dram(dynamic random access memory：动态随机存取存储器)等存储器。信号处理基板执行相对于存储于存储器基板中的像素信号的各种信号处理。在日本特开2017-188760号公报中记载的层叠型成像元件中，在由信号处理基板中包含的分析部在像素信号中检测到运动物体的情况下，由信号处理基板中包含的信号处理部执行信号处理。

2、日本特开2015-222925号公报中公开了一种抖动校正装置。日本特开2015-222925号公报中记载的抖动校正装置具备抖动检测机构、移动矢量检测机构、第1抖动校正机构、第2抖动校正机构、第1抖动校正控制机构及第2抖动校正控制机构。

3、在日本特开2015-222925号公报中记载的抖动校正装置中，抖动检测机构根据角速度信息检测抖动，并生成抖动信号。移动矢量检测机构在基于成像元件的第1拍摄模式下的被摄体的拍摄中，根据在第2拍摄模式下的被摄体的拍摄中生成的摄像信号检测移动矢量。第1抖动校正机构以光学方式校正被摄体图像的抖动。第2抖动校正机构以电子方式校正被摄体图像的抖动。第1抖动校正控制机构根据抖动信号确定校正被摄体图像的抖动的第1校正量，按照第1校正量控制第1抖动校正机构，以进行被摄体图像的抖动的校正。第2抖动校正控制机构根据移动矢量确定校正被摄体图像的抖动的第2校正量，按照第2校正量控制第2抖动校正机构，以进行被摄体图像的抖动的校正。

4、并且，在日本特开2015-222925号公报中记载的抖动校正装置中，在第1拍摄模式下，由第1抖动校正控制机构和第2抖动校正控制机构进行被摄体图像的抖动的校正，由第1抖动校正控制机构按照第1校正量和第2校正量，进行被摄体图像的抖动的校正。

技术实现思路

1、本发明的技术所涉及的一个实施方式提供一种与以比以图像数据的输出用帧速率规定的周期长的时间间隔输出抖动程度信息的情况相比，能够提高相对于图像数据的输出的抖动程度信息的输出的实时性的成像元件、摄像装置、成像元件的工作方法及程序。

2、用于解决技术课题的手段

3、本发明的技术所涉及的第1方式是一种成像元件，其包含：存储部，存储通过以第1帧速率拍摄而得到的图像数据，且内置于成像元件；处理部，对图像数据进行处理，且内置于成像元件；第1输出部，以第2帧速率输出由处理部处理的图像数据，且内置于成像元件；及第2输出部，输出表示由图像数据表示的图像中包含的抖动程度的抖动程度信息，且内置于成像元件，处理部通过使用图像数据导出抖动程度信息，第2输出部以第2帧速率以上的速率输出由处理部导出的抖动程度信息，第1帧速率是第2帧速率以上的帧速率。

4、本发明的技术所涉及的第2方式是第1方式所述的成像元件，其中，在处理部中使用的图像数据的分辨率比由第1输出部输出的图像数据的分辨率高。

5、本发明的技术所涉及的第3方式是第1方式所述的成像元件，其中，在处理部中使用的图像数据的分辨率是最大分辨率。

6、本发明的技术所涉及的第4方式是第1方式至第3方式中任一项所述的成像元件，其中，在处理部中使用的图像数据是表示一部分图像的部分图像数据。

7、本发明的技术所涉及的第5方式是第4方式所述的成像元件，其包含感光像素组，部分图像数据是从感光像素组中的成为对焦状态的区域得到的图像数据。

8、本发明的技术所涉及的第6方式是第5方式所述的成像元件，其中，成为对焦状态的区域是在持续保持对焦状态的动作模式下持续保持对焦状态的区域。

9、本发明的技术所涉及的第7方式是第5方式或第6方式所述的成像元件，其中，感光像素组具有多个相位差像素，根据多个相位差像素中的至少一部分相位差像素的像素数据，由处理部从感光像素组中确定成为对焦状态的区域。

10、本发明的技术所涉及的第8方式是第1方式至第7方式中任一项所述的成像元件，其中，图像数据是通过以第1帧速率拍摄而得到的时序数据。

11、本发明的技术所涉及的第9方式是第8方式所述的成像元件，其中，由第1输出部输出与时序数据中的一部分帧有关的第1帧数据，与剩余帧有关的第2帧数据用于由处理部导出抖动程度信息。

12、本发明的技术所涉及的第10方式是第9方式所述的成像元件，其中，第2帧数据是表示多个帧的帧数据，处理部根据第2帧数据，按周期性地确定的每一帧导出抖动程度信息。

13、本发明的技术所涉及的第11方式是第10方式所述的成像元件，其中，周期性地确定的帧是以时间间隔确定的帧，该时间间隔比以第1帧速率规定的周期长且为以第2帧速率规定的周期以下。

14、本发明的技术所涉及的第12方式是第1方式至第11方式中任一项所述的成像元件，其是至少将光电转换元件和存储部单芯片化而成的。

15、本发明的技术所涉及的第13方式是第12方式所述的成像元件，其中，成像元件是存储部层叠于光电转换元件上的层叠型成像元件。

16、本发明的技术所涉及的第14方式是一种摄像装置，其包含：第1方式至第13方式中任一项所述的成像元件；振动传感器，检测所施加的振动；及校正部，根据从振动传感器输出的振动数据和从第2输出部输出的抖动程度信息来校正抖动。

17、本发明的技术所涉及的第15方式是第14方式所述的摄像装置，其中，处理部根据由校正部校正了抖动的图像数据，导出抖动程度信息，所述摄像装置还包含后级电路，该后级电路接收从第2输出部输出的抖动程度信息，后级电路使用振动数据和振动传感器的基准输出电平进行使校正部校正抖动的控制，后级电路根据从第2输出部输出的抖动程度信息来变更基准输出电平。

18、本发明的技术所涉及的第16方式是第14方式所述的摄像装置，其中，处理部根据由校正部校正了抖动的图像数据，导出抖动程度信息，成像元件还包含校正控制电路，该校正控制电路使用振动数据和振动传感器的基准输出电平进行使校正部校正抖动的控制，校正控制部根据从第2输出部输出的抖动程度信息来变更基准输出电平。

19、本发明的技术所涉及的第17方式是第15方式或第16方式所述的摄像装置，其中，基准输出电平的变更量被限制在不超过在处理部中使用的图像数据的像素数的缩小程度的范围内。

20、本发明的技术所涉及的第18方式是第15方式至第17方式中任一项所述的摄像装置，其中，图像数据是通过以第1帧速率拍摄而得到的时序数据，由第1输出部输出与时序数据中的一部分帧有关的第1帧数据，与时序数据中的剩余帧有关的第2帧数据是表示多个帧的帧数据，用于由处理部按周期性地确定的每一帧导出抖动程度信息，多个帧是通过每当变更基准输出电平时，将变更后的基准输出电平反映在基于校正部的抖动的校正中而得到的帧。

21、本发明的技术所涉及的第19方式是第14方式至第18方式中任一项所述的摄像装置，其中，校正部以光学方式校正抖动。

22、本发明的技术所涉及的第20方式是第14方式至第19方式中任一项所述的摄像装置，其还包含控制部，该控制部进行使存储装置存储从第1输出部输出的图像数据的控制及使显示装置显示基于从第1输出部输出的图像数据的图像的控制中的至少一者。

23、本发明的技术所涉及的第21方式是一种成像元件的工作方法，所述成像元件内置有：存储部，存储通过以第1帧速率拍摄而得到的图像数据；及处理部，对图像数据进行处理；第1输出部，以第2帧速率输出由处理部进行处理的图像数据；及第2输出部，所述成像元件的工作方法包括如下步骤：通过处理部使用图像数据，导出表示由图像数据表示的图像中包含的抖动程度的抖动程度信息；及第2输出部以第2帧速率以上的速率输出由处理部导出的抖动程度信息，第1帧速率是第2帧速率以上的帧速率。

24、本发明的技术所涉及的第22方式是一种用于使计算机作为成像元件中包含的处理部、第1输出部及第2输出部发挥功能的程序，所述成像元件内置有：存储部，存储通过以第1帧速率拍摄而得到的图像数据；及处理部，对图像数据进行处理；第1输出部，以第2帧速率输出由处理部进行处理的图像数据；及第2输出部，所述程序包括如下步骤：通过处理部使用图像数据，导出表示由图像数据表示的图像中包含的抖动程度的抖动程度信息；及第2输出部以第2帧速率以上的速率输出由处理部导出的抖动程度信息，第1帧速率是第2帧速率以上的帧速率。