控制方法、控制装置及电子装置与流程

本发明涉及消费性电子技术，特别涉及一种控制方法、控制装置和电子装置。

背景技术：

现有的手机相机在进行反差对焦时，需要反复推动对焦马达寻找对焦位置，对焦速度较慢，而采用相位对焦虽然速度较快，但由于图像传感器的相位检测像素数量有限，稳定度较差，对焦体验不佳。

技术实现要素：

本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明需要提供一种控制方法、控制装置和电子装置。

本发明实施方式的控制方法，用于控制电子装置，所述电子装置包括成像装置、显示器和输入装置，所述成像装置包括广角摄像头、超广角摄像头和深度摄像头，所述广角摄像头的视场位于所述超广角摄像头的视场内，所述控制方法包括以下步骤：

处理所述深度摄像头输出的深度信息以获得对焦数据；

根据所述对焦数据控制所述广角摄像头对焦；和

控制所述显示器显示所述广角摄像头输出的广角缓存图像为预览图像。

在某些实施方式中，所述控制方法在所述处理所述深度摄像头输出的深度信息以获得对焦数据的步骤前包括以下步骤：

启动所述广角摄像头和所述深度摄像头并关闭所述超广角摄像头。

在某些实施方式中，所述控制方法在所述控制所述显示器显示所述广角摄像头输出的广角缓存图像为预览图像的步骤后包括以下步骤：

处理所述输入装置的用户输入以判断是否缩放所述预览图像；

在缩放所述预览图像时判断缩放比例是否超过缩小预定阈值；

在所述缩放比例超过所述缩小预定阈值时控制所述显示器显示所述超广角摄像头输出的超广角缓存图像为所述预览图像。

在某些实施方式中，所述缩小预定阈值大于所述广角摄像头和所述超广角摄像头的视场角比例且小于1；所述在所述缩放比例超过所述缩小预定阈值时控制所述显示器显示所述超广角摄像头输出的超广角缓存图像为所述预览图像的步骤包括以下步骤：

启动所述超广角摄像头；和

在所述缩放比例超过所述缩小预定阈值预定时间后关闭所述广角摄像头。

在某些实施方式中，所述控制方法在所述在所述缩放比例超过所述缩小预定阈值时控制所述显示器显示所述超广角摄像头输出的超广角缓存图像为所述预览图像的步骤后包括以下步骤：

根据所述对焦数据控制所述超广角摄像头对焦。

在某些实施方式中，所述在所述缩放比例超过所述缩小预定阈值时控制所述显示器显示所述超广角摄像头输出的超广角缓存图像为所述预览图像的步骤包括以下步骤：

根据所述缩放比例裁剪所述超广角缓存图像；

将所述裁剪图像拉伸放大以适于在所述显示器显示从而得到拉伸裁剪图像；和

控制所述显示器显示所述拉伸裁剪图像。

本发明实施方式的控制装置，用于控制电子装置，所述电子装置包括成像装置、显示器和输入装置，所述成像装置包括广角摄像头、超广角摄像头和深度摄像头，所述广角摄像头的视场位于所述超广角摄像头的视场内，所述控制装置包括：

处理模块，用于处理所述深度摄像头输出的深度信息以获得对焦数据；

第一控制模块，用于根据所述对焦数据控制所述广角摄像头对焦；和

第二控制模块，用于控制所述显示器显示所述广角摄像头输出的广角缓存图像为预览图像。

在某些实施方式中，所述控制装置包括开关模块，用于启动所述广角摄像头和所述深度摄像头并关闭所述超广角摄像头。

在某些实施方式中，所述控制装置包括：

第一判断模块，用于处理所述输入装置的用户输入以判断是否缩放所述预览图像：

第二判断模块，用于在缩放所述预览图像时判断缩放比例是否超过缩小预定阈值；和

第三控制模块，用于在所述缩放比例超过所述缩小预定阈值时控制所述显示器显示所述超广角摄像头输出的超广角缓存图像为所述预览图像。

在某些实施方式中，所述缩小预定阈值大于所述广角摄像头和所述超广角摄像头的视场角比例且小于1，所述第三控制模块包括：

切换单元，用于启动所述超广角摄像头，并在所述缩放比例超过所述缩小预定阈值预定时间后关闭所述广角摄像头。

在某些实施方式中，所述控制装置包括：

第四控制模块，用于根据所述对焦数据控制所述超广角摄像头对焦。

在某些实施方式中，所述第三控制模块包括：

裁剪单元，用于根据所述缩放比例裁剪所述超广角缓存图像；

放大单元，用于将所述裁剪图像拉伸放大以适于在所述显示器显示从而得到拉伸裁剪图像；和

控制单元，用于控制所述显示器显示所述拉伸裁剪图像。

本发明实施方式的电子装置，包括：

显示器；

输入装置；

成像装置，所述成像装置包括广角摄像头、超广角摄像头和深度摄像头；和

上述的控制装置。

在某些实施方式中，所述电子装置包括手机和平板电脑。

在某些实施方式中，所述广角摄像头的视场角为70-90度，所述超广角摄像头的视场角大于110度。

在某些实施方式中，所述深度摄像头包括RGBD摄像头和TOF摄像头。

在某些实施方式中，所述显示器和所述输入装置集成为触控屏。

本发明实施方式的控制方法、控制装置和电子装置，采用单独的深度摄像头，并根据深度摄像头提供的深度信息进行对焦，对焦体验更好，并且能保证用于成像的摄像头的成像质量。

本发明的附加方面的优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：

图1是本发明实施方式的控制方法的流程示意图。

图2是本发明实施方式的电子装置的功能模块示意图。

图3是本发明实施方式的成像装置的示意图。

图4是本发明实施方式的控制方法的状态示意图。

图5是本发明某些实施方式的控制方法的流程示意图。

图6是本发明某些实施方式的控制装置的功能模块示意图。

图7是本发明某些实施方式的控制方法的流程示意图。

图8是本发明某些实施方式的控制装置的功能模块示意图。

图9是本发明某些实施方式的控制方法的流程示意图。

图10是本发明某些实施方式的控制装置的功能模块示意图。

图11是本发明某些实施方式的控制方法的流程示意图。

图12是本发明某些实施方式的控制装置的功能模块示意图。

图13是本发明某些实施方式的控制方法的流程示意图。

图14是本发明某些实施方式的控制装置的功能模块示意图。

具体实施方式

下面详细描述本发明的实施方式，所述实施方式的示例在附图中示出，其中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的，仅用于解释本发明的实施方式，而不能理解为对本发明的实施方式的限制。

请参阅图1，本发明实施方式的控制方法，用于控制电子装置。电子装置包括成像装置、显示器和输入装置。成像装置包括广角摄像头、超广角摄像头和深度摄像头。控制方法包括步骤：

S10：处理相深度像头输出的深度信息以获得对焦数据；

S20：根据对焦数据控制广角摄像头对焦；和

S30：控制显示器显示广角摄像头输出的广角缓存图像为预览图像。

请参阅图2至图4，本发明实施方式的控制装置100包括处理模块10、第一控制模块20和第二控制模块30。作为例子，本发明实施方式的控制方法可以由本发明实施方式的控制装置100实现。可应用于电子装置1000并用于控制电子装置1000，其中，电子装置1000还包括成像装置200、显示器300和输入装置400。成像装置200进一步包括广角摄像头210、超广角摄像头220和深度摄像头230。其中，广角摄像头210的视场位于超广角摄像头220内，深度摄像头230的测量原理是基于光从光源到被摄物再返回摄像头所需要的时间，距离越长，所花时间越长。对光源和图像采集的同步方式确保能从图像数据中提取和计算该距离也即是深度信息，深度信息也即是成像中的物距，根据物距可以得到对焦马达的位置，进而完成对焦。需要说明的是，深度摄像头230仅用于采集数据而并不用于成像。

其中，本发明实施方式的控制方法的步骤S10可以由处理模块10实现，步骤S20可以由第一控制模块20实现，步骤S30可以由第二控制模块30实现。也即是说，处理模块10用于处理深度摄像头230输出的深度信息以获得对焦数据。第一控制模块20用于根据对焦数据控制广角摄像头210对焦。第二控制模块30用于控制显示器300显示广角摄像头210输出的广角缓存图像为预览图像。

电子装置1000包括手机或平板电脑，在采用单一摄像头的成像模组进行对焦时，例如采用反差对焦摸式，需要反复推动对焦马达寻找对焦位置，而为实现快速对焦，例如采用相位对焦模式，需要将图像传感器的部分像素制作成相位检测像素，而相位检测像素不能进行成像，如此，将会导致利用该图像传感器所成的图像在一定程度上质量下降，并且由于相位检测像素的数量有限，在对焦中往往会受到一些限制，例如稳定度较差。

本发明实施方式中，成像装置200包括广角摄像头210、超广角摄像头220和深度摄像头230，能够成像的两个摄像头的视场大小或者说取景范围的从小到大依次为广角摄像头210、超广角摄像头220。在一些示例中，广角摄像头的视场角为70-90度，超广角摄像头的视场角大于110度。深度摄像头230可以是RGBD摄像头和TOF摄像头。

操作中，以广角摄像头210位默认摄像头，在进入拍照应用程序后，相应摄像头开启，例如，可以开启全部三个摄像头，也可以开启广角摄像头210和深度摄像头230，在此不做限制。

深度摄像头230获取被摄物的深度信息，经处理后获得对焦数据，将对焦数据提供给广角摄像头210，广角摄像头210根据对焦数据得到对焦位置，而后驱动对焦马达至对焦位置完成对焦。并以广角摄像头210输出的广角缓存图像为预览图像提供给用户。

综上所述，本发明实施方式的控制方法、控制装置和电子装置，采用单独的深度摄像头230，并根据深度摄像头230提供的深度信息进行对焦，对焦体验更好，并且能保证用于成像的摄像头的成像质量。

请参阅图5和图6，在某些实施方式中，控制方法在步骤S10前包括步骤：

S00：启动广角摄像头和深度摄像头并关闭超广角摄像头。

在某些实施方式中，控制装置100包括开关模块40。步骤S00可以由开关模块40实现。或者说，开关模块40用于启动广角摄像头210和深度摄像头230并关闭超广角摄像头220。

需要说明的是，此处的关闭应广义理解为摄像头上电但并未获取数据的待机状态，而非断电状态。

可以理解，成像模组200在电子装置1000中属于功耗较高的模组，因此三个摄像头同时开启获取数据的功耗将大于开启单一摄像头的功耗。在开启某一摄像头以及深度摄像头230时，另外一个用于成像的摄像头处于待机状态，当满足切换条件时，处于待机状态中的一个摄像头将进入开启模式，而当前开启的摄像头将变为待机模式。

具体地，当开启拍照应用程序时，首先启动广角摄像头210和深度摄像头230，同时关闭超广角摄像头220，也即是超广角摄像头220处于待机状态，当满足切换条件，例如缩放比例超过缩小预定阈值时，将启动超广角摄像头220，而广角摄像头210将变为待机状态。需要说明的是，本实施方式中的缩放操作的基础对象为广角摄像头210输出的预览图像。

如此，可根据触发条件对两个能够成像的摄像头进行切换，而深度摄像头230处于开启状态，可用于随时提供对焦数据，同时能够降低功耗。

请参阅图7和图8，在某些实施方式中，控制方法在步骤S30后包括步骤：

S40：处理输入装置的用户输入以判断是否缩放预览图像；

S50：在缩放预览图像时判断缩放比例是否超过缩小预定阈值；和

S60：在缩放比例超过缩小预定阈值时控制显示器显示超广角摄像头输出的超广角缓存图像为预览图像。

在某些实施方式中，控制装置100包括第一判断模块50、第二判断模块60和第三控制模块70。步骤S40可以由第一判断模块50实现，步骤S50可以由第二判断模块60实现，步骤S60可以由第三控制模块70实现。或者说，第一判断模块50用于处理输入装置的用户输入以判断是否缩放预览图像。第二判断模块60用于在缩放预览图像时判断缩放比例是否超过缩小预定阈值。第三控制模块70用于在缩放比例超过缩小预定阈值时控制显示器300显示超广角摄像头220输出的超广角缓存图像为预览图像。

电子装置1000例如手机或平板电脑，由于整体设计轻薄的需求，通常成像模组体积及厚度均一定尺寸要求，因此无法采用光学变焦的单一成像模组，而采用数字变焦来模拟光学变焦，数字变焦对图像进行裁剪并对裁剪的图像的像素之间进行内插，从而产生放大但分辨率较低的图像。

操作中，通常以广角摄像头210为默认摄像头，首先输出广角缓存图像作为预览图像，用户通过输入装置400对预览图像进行放大或缩小操作，也即是说，改变预览图像倍率。其中，在一些示例中，显示器300与输入装置400集成为触控屏，如此，方便用户在预览图像时进行操作。例如，对于触控屏，用户可以通过双指在预览画面的捏合或扩大来进行缩放预览图像的操作。

对于缩放操作，当缩放比例超过缩小预定阈值时，将由广角摄像头210切换至超广角摄像头220，并以超广角摄像头220输出的缓存图像作为预览图像。具体地，在使用广角摄像头210取景时，当检测到广角摄像头210的预览图像被缩小时，判断缩小比例是否超过缩小预定阈值，当超过预定阈值时，则切换至超广角摄像头220，也即是说，将超广角摄像头220输出的超广角缓存图像作为预览图像。

三个摄像头设置于电子装置1000的壳体的同一侧面，例如均为前置或后置摄像头，并且相互独立。三个摄像头之间可以并列设置且视场至少部分重叠。

请参阅图9和10，在某些实施方式中，步骤S60包括步骤：

S62：启动超广角摄像头；和

S64：在缩放比例超过缩小预定阈值预定时间后关闭广角摄像头。

在某些实施方式中，第三控制模块70包括切换单元72。步骤S62和步骤S64可以切换单元72实现。或者说，切换单元72用于启动超广角摄像头220并在缩放比例超过缩小预定阈值预定时间后关闭广角摄像头210。

当判断满足摄像头的切换条件时，将开启相应的摄像头，在本实施方式中相应摄像头为超广角摄像头220。切换摄像头后，预览图像将变为超广角摄像头220输出的超广角预览图像。可以理解，为了降低功耗，通常只开启一个用于成像的摄像头，而另一个用于成像的摄像头处于待机状态，当满足切换条件的瞬间，将触发其中处于待机状态的摄像头开启，而此时若立即关闭当前摄像头而用户进行相反操作，则需要再次进行打开和关闭的切换操作，等待预定时间后在关闭当前摄像头可以使得摄像头的切换过渡更加自然，避免不同摄像头之间的开闭状态反复切换。

缩小预定阈值为广角摄像头210和超广角摄像头220的视场角比例。例如，在一些示例中，广角摄像头210的视场角为90度，而超广角摄像头220的视场角为120度。缩小预定阈值为3/4,小于1。

操作中，首先开启广角摄像头210，在缩小操作中，当缩放比例小于3/4时，将以数字变焦对广角摄像头210的预览图像进行缩小，而当缩放比例超过3/4时，将开启超广角摄像头220，进而显示超广角摄像头220输出的超广角缓存图像为预览图像，当预定时间内，例如1s，用户无放大操作，则关闭广角摄像头210。当然，缩小预定阈值仅为示意性说明，不做具体限制。也即是说，当开始进行缩小操作时，当缩小比例逐渐增大至超过预定阈值时，将由广角摄像头210切换至超广角摄像头220。在本示例中，切换后的超广角摄像头220将直接为光学自然成像，而在缩小过程中，则首先由广角摄像头210以数字变焦显示，直至切换至超广角摄像头220以自然光学成像状态。

如此，可完成广角摄像头210和超广角摄像头220之间的切换，以实现光学变焦。

请参阅图11和图12，在某些实施方式中，控制方法在步骤S60后包括步骤：

S70：根据对焦数据控制超广角摄像头对焦。

在某些实施方式中，控制装置100包括第四控制模块80。步骤S70可以由第四控制模块80实现。或者说，第四控制模块80用于根据对焦数据控制超广角摄像头220对焦。

如此，切换至超广角摄像头220后仍根据深度摄像头230的对焦数据进行对焦。

进一步地，在某些示例中，广角摄像头210和超广角摄像头220还包括闭环对焦马达，可以理解地，闭环对焦马达在被驱动后可以反馈位置信息，将使得对焦马达的驱动更加精确。

在某些实施方式中，请参阅图13和图14，在某些实施方式中，步骤S60包括步骤：

S65：根据缩放比例裁剪超广角缓存图像；

S66：将裁剪图像拉伸放大以适于在显示器显示从而得到拉伸裁剪图像；和

S67：控制显示器显示拉伸裁剪图像。

在某些实施方式中，第三控制模块70包括裁剪单元75、放大单元76和控制单元77。步骤S65可以由裁剪单元75实现，步骤S66可以由放大单元76实现，步骤S67可以由控制单元67实现。或者说，裁剪单元75用于根据缩放比例裁剪超广角缓存图像。放大单元76用于将裁剪图像拉伸放大以适于在显示器300显示从而得到拉伸裁剪图像。控制单元77用于控制显示器300显示拉伸裁剪图像。

当进行缩小操作而切换摄像头时，由于视场角变大，画面会因为瞬间产生拉伸的变化而抖动，用户体验较差，因此为保证切换摄像头时画面的流畅度，在检测到用户对广角摄像头210的预览图像进行缩小操作时，则随即开启超广角摄像头220，超广角摄像头220在自然光学成像的基础上以数字变焦输出超广角缓存图像作为预览图像，直至达到缩小预定阈值时将过渡至自然光学成像状态。

如此，可使得广角摄像头210切换至超广角摄像头220的过程中，确保画面的流畅度。

在本发明的实施方式的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明的实施方式和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的实施方式的限制。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的实施方式的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

在本发明的实施方式的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接或可以相互通讯；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明的实施方式中的具体含义。

在本发明的实施方式中，除非另有明确的规定和限定，第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触，也可以包括第一和第二特征不是直接接触而是通过它们之间的另外的特征接触。而且，第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方，或仅仅表示第一特征水平高度小于第二特征。

上文的公开提供了许多不同的实施方式或例子用来实现本发明的实施方式的不同结构。为了简化本发明的实施方式的公开，上文中对特定例子的部件和设置进行描述。当然，它们仅仅为示例，并且目的不在于限制本发明。此外，本发明的实施方式可以在不同例子中重复参考数字和/或参考字母，这种重复是为了简化和清楚的目的，其本身不指示所讨论各种实施方式和/或设置之间的关系。此外，本发明的实施方式提供了的各种特定的工艺和材料的例子，但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。

在本说明书的描述中，参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本发明的实施方式的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本发明的各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。

尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。