00内的公布区域(例如，未经用户验证便可访问的存储器)、或基于服务的私人存储区域、存储指纹信息或图像中的至少一个以在电子设备400被偷走时记录用户的电子设备400的内部或外部设备。
[0247]当通过传感器模块420获取的生理信息是心律信息时，控制模块430可通过使用心律信息控制电子设备400以对图像进行处理。电子设备400可至少基于通过传感器模块420获取的生理信号，来获取待检查对象510的心律信息。控制模块430可将心律信息与对应于待检查对象510的用户的图像一起显示在显示器440上。
[0248]图20为根据本发明实施方式的用于使用心律信息提供预览图像的操作的流程图。
[0249]图21示出根据本发明实施方式的屏幕，该屏幕显示通过使用心律信息提供的预览图像。
[0250]参考图20和图21，在步骤1510中，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测接触操作作为输入操作。
[0251]在步骤1520中，在维持接触操作的同时，控制模块430至少基于生理信号获取待检查对象510的心律信息。
[0252]在步骤1530中，控制模块430将通过相机模块410获取的预览图像631显示在显示器440上，并且还将心律信息633与预览图像一起显示。
[0253]在步骤1540中，控制模块430检测在接触状态期间的分离操作，并且在步骤1550中，通过控制相机模块410获取图像。
[0254]控制模块430可存储图像，使得心律信息包括在图像中。
[0255]控制模块430可检测包括在预览图像中的、对应于待检查对象510的用户的图像，并显示用户图像和心律信息，使得用户图像与心律信息彼此相关。
[0256]还可以包括这样的操作，所述操作为在显示预览图像631的同时，指定心律信息633的一个或多个显示属性(例如，位置、尺寸、颜色、形状、图标、头像和预定的模板)。
[0257]心律信息可为与压力或情绪相关的信息，其中压力或情绪是基于通过HRM传感器或HRV传感器所收集的生理信号确定的，并且心律信息633的显示属性可基于与对应压力或情绪有关的信息进行指定或改变。
[0258]图22为根据本发明实施方式的用于将用户图像和心律信息显示在一起的操作的流程图。
[0259]图23示出根据本发明实施方式的将图像与心律信息显示在一起的屏幕。
[0260]参考图22和图23，在步骤1610中，例如，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测输入操作。
[0261]在步骤1620中，控制模块430至少基于生理信号获取待检查对象510的心律信息。
[0262]在步骤1630中，控制模块430根据输入操作通过相机模块410获取图像。
[0263]在步骤1640中，控制模块430在图像内检测对应于待检查对象510的用户图像。当图像中包括多人643、645和647的图像时，控制模块430根据心律信息、生理信息、或用户设置来检测对应于待检查对象510的用户图像。电子设备400可包括数据库，该数据库包括对应于心律信息的用户图像，并且可基于该数据库来检测用户图像。
[0264]在步骤1650中，控制模块430将所获取的图像641显示在显示器440上并且显示心律信息，使得心律信息以图形对象或文本的形式646与用户图像645相关。
[0265]控制模块430可将基于生理信息的情绪信息与图像一起显示。
[0266]图24为根据本发明实施方式的用于将所获取的图像与情绪信息显示在一起的操作的流程图。
[0267]图25示出根据本发明实施方式的将图像与情绪信息显示在一起的屏幕。
[0268]参考图24和图25，在步骤1710中，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测输入操作。
[0269]在步骤1720中，控制模块430至少基于生理信号获取待检查对象510的情绪信息。情绪信息可包括例如喜悦、羞涩、悲伤、或兴奋。情绪信息可根据心律信息来获取。
[0270]控制模块430通过检测预定时间内的心律增加或心律信号的特定模式，确定对应于喜悦的情绪信息。
[0271]另选地，控制模块430可通过识别在预览图像中示出的情绪状态来获取情绪信息，其中预览图像通过相机模块410获得。例如，控制模块430可基于以下各项中的至少一个来获取情绪信息:预览图像中的用户身体运动模式、面部图像中的面部表情、面部形状、面部的运动模式(例如，眼睛或嘴巴的形状变化)、是否存在笑容、或是否存在眨眼。
[0272]此外，在步骤1730中，控制模块430根据输入操作通过相机模块410获取图像。
[0273]在步骤1740中，控制模块430将情绪信息与图像一起显示在显示器440上。
[0274]控制模块430可根据情绪信息改变在图像中示出的用户的面部表情。更具体地讲，控制模块430可分析用户的面部的特征点，并且改变这些特征点中的与情绪信息相关联的特征点的位置。当情绪信息对应于喜悦时，控制模块430可通过改变对应于嘴巴的特征点的位置使得嘴角上扬或嘴唇分开来改变用户的面部表情，以在图像中表示用户的笑脸。
[0275]控制模块430可根据情绪信息改变在图像中示出的用户的面部颜色的一部分或全部。例如，当情绪信息对应于兴奋或羞涩时，控制模块430可使红色653出现在图像中所示的用户651的脸颊上。
[0276]控制模块430可识别包括在图像中的人，获取对应于待检查对象510的用户和其他人的生理信息或情绪信息，并将生理信息和情绪信息显示在一起。为此，电子设备400可与包括所识别的人的生理信号的另一个设备通信。控制模块430可基于包括在由传感器模块420接收的输入信号中的生理信号而获取用户的生理信息，并且通过与对应于面部识别信息的另一个电子设备通信而获取其他人的生理信息。
[0277]图26示出根据本发明实施方式的显示图像的显示屏，其中在所述图像中，生理信息与用户相关。
[0278]参考图26，例如，对应于待检查对象510的用户661的生理信息662是通过电子设备400的传感器模块获取的，并且与用户661相关。此外，其他用户663和667的生理信息664和668可通过其他用户663和667的通信或可穿戴设备获取，并且与其他用户663和667相关。
[0279]控制模块430可将生理信息或情绪信息与通过相机模块410获取的图像存储在一起。生理信息或情绪信息可存储在用于图像的文件格式的元信息区域中。
[0280]图27A至图27D示出根据本发明实施方式的控制电子设备以拍摄全景图像的方法。
[0281]参考图27A至图27D，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测输入操作。控制模块430组合根据所检测的输入操作获取的一个或多个图像以生成连接的图像，例如，全景图像。
[0282]当检测到接触操作时，电子设备400的控制模块430通过相机模块410获取参考图像，并且根据电子设备400的主体的向上和向下或向左和向右旋转而获取连接到参考图像的一个或多个图像。控制模块430在电子设备400的显示器上显示向导，该向导用于根据主体的旋转指示连接到参考图像的一个或多个图像的位置。向导显示拍摄方向或拍摄位置。当检测到另一个输入操作时，控制模块430组合参考图像和一个或多个图像。例如，组合可对应于与根据主体的向上和向下旋转而位于参考图像上方或下方的图像对应的一个或多个图像的组合，或者对应于与根据主体的向右和向左旋转而位于参考图像的左侧或右侧的图像对应的一个或多个图像的组合。
[0283]参考图27A，当检测到相对于被布置在电子设备400的主体的后表面上的传感器模块420的接触操作时，控制模块430通过被布置在电子设备400的主体的前表面上的相机模块411获取参考图像670a。参考图像670a可包括对应于电子设备400的用户的图像671。
[0284]参考图27B，当电子设备400的主体逆时针旋转时，控制模块430通过相机模块411获取对应于在参考图像670a的右侧的图像的至少一个图像670b或670c。至少一个图像670b或670c可包括参考图像670a的至少一些区域。
[0285]参考图27C，当电子设备400的主体顺时针旋转时，控制模块430通过相机模块411获取对应于在参考图像670a的左侧的图像的至少一个图像670d或670e。至少一个图像670d或670e可包括参考图像670a的至少一些区域。
[0286]参考图27D，根据接触操作维持特定时间，在接触状态之后，当检测到另外的接触操作时或当检测到分离操作时，控制模块430通过连接参考图像670a和至少一个图像670b、670c、670d、或 670e，生成一个图像 670f。
[0287]此外，本文所公开的实施方式仅用于说明和技术内容的理解，而不限制本发明的范围。因此，所属领域技术人员应理解，在不脱离本发明的精神和范围的情况下可做出形式和细节上的各种更改。因此，本发明的范围并非由本发明的详细说明定义，而由所附权利要求及其等价物定义，因此在所述范围内的全部差异均应解释为包括在本发明中。
【主权项】
1.一种控制电子设备的方法，所述方法包括: 接收输入信号，所述输入信号包括将通过所述电子设备的传感器模块进行检查的对象的生理信号； 基于至少所述输入信号检测输入操作；以及 根据所述输入操作通过相机模块获取图像。2.根据权利要求1所述的方法，其中所述生理信号包括光电容积描记法测量信号。3.根据权利要求1所述的方法，其中检测所述输入操作包括检测接触操作，所述接触操作包括接触所述传感器模块的表面的至少一部分。4.根据权利要求1所述的方法，其中根据通过所述传感器模块接收的所述生理信号和另一个输入信号的信号电平或信号模式中的一个来检测所述输入操作。5.根据权利要求1所述的方法，其中检测所述输入操作包括: 检测接触操作，所述接触操作包括在所述传感器模块的表面的至少一部分上的接触；以及 检测状态，其中在所述状态下，所述接触在所述接触操作之后维持预定时间；以及 其中获取所述图像包括: 根据所述接触操作改变所述相机模块的设置；以及 当经过所述预定时间时，通过所述相机模块获取所述图像。6.根据权利要求5所述的方法，其中改变所述设置包括控制所述相机模块的焦距和控制所述相机模块的白平衡中的至少一者。7.根据权利要求1所述的方法，其中检测所述输入操作包括检测接近操作，所述接近操作包括在特定范围内接近所述传感器模块的表面；以及 其中获取所述图像包括根据所述接近操作改变所述相机模块的设置。8.根据权利要求1所述的方法，其中检测所述输入操作包括检测分离操作，所述分离操作包括与所述传感器模块的表面分离。9.根据权利要求1所述的方法，其中检测所述输入操作包括: 检测接触操作，所述接触操作包括接触所述传感器模块的表面的至少一部分；以及 检测分离操作，所述分离操作包括与所述传感器模块的所述表面分离；以及 其中获取所述图像包括: 根据所述接触操作改变所述相机模块的设置；以及 根据所述分离操作通过所述相机模块获取所述图像。10.根据权利要求1所述的方法，进一步包括: 基于所述输入信号获取待检查对象的心律信息； 在所述图像中识别所述待检查对象；以及 显示与识别到的所述待检查对象相关联的所述心律信息。11.一种电子设备，所述电子设备包括: 相机模块； 传感器模块，接收包括待检查对象的生理信号的输入信号；以及控制模块，至少基于所述输入信号来检测输入操作，并根据所述输入操作通过所述相机模块获取图像。12.—种方法，所述方法包括: 通过电子设备的生物统计传感器接收用户的生理信号；以及 至少基于所述生理信号的变化通过所述电子设备的相机模块获取图像。13.根据权利要求12所述的方法，其中获取所述图像包括基于所述生理信号的电平和模式中的至少一个来确定所述生理信号是否改变。14.根据权利要求12所述的方法，其中获取所述图像包括当不再接收到所述生理信号时通过所述相机模块获取所述图像。15.一种移动终端，所述移动终端包括: 相机模块，布置在所述移动终端的主体的前表面和后表面中的至少一个上， 传感器模块，用于接收用户的生理信号，所述传感器模块被形成在所述主体的所述前表面和所述后表面中的至少一个上；以及 控制模块，用于至少基于所述生理信号的变化通过所述相机模块获取图像，所述控制模块功能性地连接到所述相机模块和所述传感器模块。
【专利摘要】本发明公开一种电子设备的控制方法。所述方法包括：接收输入信号，所述输入信号包括将通过所述电子设备的传感器模块进行检查的对象的生理信号；基于至少所述输入信号检测输入操作；以及根据所述输入操作通过相机模块获取图像。
【IPC分类】H04N5/232, A61B5/00
【公开号】CN105391937
【申请号】CN201510557063
【发明人】金南晋, 玄素拉, 徐显虎, 全昶贤, 具允谟, 金开渊, 金键洙, 金羲德, 新承爀, 李基赫, 李哲焕, 郑哲虎, 崔胜珉
【申请人】三星电子株式会社
【公开日】2016年3月9日
【申请日】2015年9月2日
【公告号】EP2993892A1, US20160065840