智能终端控制方法和系统、智能终端的制作方法
【专利摘要】本发明涉及一种智能终端控制方法,用于对安装有至少一种应用程序的智能终端进行控制;该方法包括:接收应用程序发出的应用请求;应用请求中包含当前登录所述应用程序的用户身份信息;采集目标区域范围内用户的人脸图像;根据所述人脸图像识别用户身份信息;判断识别到的用户身份信息是否与所述应用请求中的用户身份信息匹配;若是,则将匹配用户标定为目标用户,并展示所述应用请求,采集目标用户的目标部位的运动轨迹,对运动轨迹进行识别并输出运动轨迹识别结果,根据运动轨迹识别结果对所述应用请求进行相应的应答操作。上述智能终端控制方法具有便于用户操作且信息安全性较好的优点。本发明还提供一种智能终端控制系统及智能终端。
【专利说明】
智能终端控制方法和系统、智能终端
技术领域
[0001]本发明涉及智能终端控制技术领域,特别是涉及一种智能终端控制方法和系统,还涉及一种智能终端。
【背景技术】
[0002]为满足用户的多样化需求,越来越多的智能终端如智能电视、计算机、平板电脑以及智能游戏机等均安装有相应的应用程序(如MSN、QQ、微信、邮箱客户端等)。这些应用程序往往会在智能终端启动后进入后台运行。当这些应用程序接收到新消息或者发出操作请求时,用户需要通遥控器、鼠标、键盘等输入设备进行相应的操作,且当智能终端具有多个操作用户时,任意用户均可以对该应用程序的新消息进行查看或者对操作请求进行应答。由于应用程序上通常记载有或者能够反映一些用户的个人信息,因此这种控制方法不利于进行用户的隐私保护且不便于用户进行操作。
【发明内容】
[0003]基于此,有必要提供一种便于用户操作且信息安全性较好的智能终端控制方法及系统、智能终端。
[0004]—种智能终端控制方法,用于对安装有至少一种应用程序的智能终端进行控制;所述方法包括:接收应用程序发出的应用请求;所述应用请求中包含当前登录所述应用程序的用户身份信息;采集目标区域范围内用户的人脸图像;根据所述人脸图像识别用户身份信息;判断识别到的用户身份信息是否与所述应用请求中的用户身份信息匹配;若是,则将匹配用户标定为目标用户,并展示所述应用请求,采集所述目标用户的目标部位的运动轨迹,对所述运动轨迹进行识别并输出运动轨迹识别结果,根据所述运动轨迹识别结果对所述应用请求进行相应的应答操作。
[0005]在其中一个实施例中,所述方法还包括步骤:采集目标区域范围内用户的人脸图像和手势图像;根据所述人脸图像识别用户身份信息;对手势图像进行手势识别并输出手势识别结果;所述手势识别结果为对目标应用程序执行目标操作;根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。
[0006]在其中一个实施例中,所述根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作的步骤之后还包括步骤:控制所述智能终端处于静音模式;采集目标用户的语音信息;识别所述语音信息并输出语音识别结果;以及根据所述语音识别结果对所述目标应用程序执行相应的操作。
[0007]在其中一个实施例中,所述方法还包括:采集目标区域范围内用户的手势图像;根据所述手势图像识别用户手势并输出手势识别结果;所述手势识别结果为开启语音识别模式;根据所述手势识别结果控制所述智能终端开启语音识别模式;采集用户的语音信息;根据所述语音信息提取语音特征信息以获取发送者的用户身份信息;识别所述语音信息并输出语音识别结果;所述语音识别结果为对目标应用程序执行目标操作;根据所述语音识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。
[0008]在其中一个实施例中,所述方法还包括存储用户身份信息以及与所述用户身份信息匹配的脸部特征信息的步骤;所述根据人脸图像识别用户身份信息的步骤包括:根据所述人脸图像提取用户的脸部特征信息;根据所述脸部特征信息获取与所述脸部特征信息匹配的用户身份信息。
[0009]—种智能终端控制系统,用于对安装有至少一种应用程序的智能终端进行控制;包括:接收模块,接收应用程序发出的应用请求;所述应用请求中包含当前登录所述应用程序的用户身份信息;图像采集模块,用于采集目标区域范围内用户的人脸图像;识别模块,用于根据所述人脸图像识别用户身份信息;判断模块,用于判断识别到的用户身份信息是否与所述应用请求中的用户身份信息匹配;标定模块,用于将匹配用户标定为目标用户;展示模块,用于展示所述应用请求;所述图像采集模块还用于采集所述目标用户的目标部位的运动轨迹;所述识别模块还用于对所述运动轨迹进行识别并输出运动轨迹识别结果;以及交互控制模块,用于根据所述运动轨迹识别结果对所述应用请求进行相应的应答操作。
[0010]在其中一个实施例中,所述图像采集模块还用于采集目标区域范围内用户的人脸图像和手势图像;所述识别模块还用于根据所述人脸图像识别用户身份信息,并对手势图像进行手势识别后输出手势识别结果;所述手势识别结果为对目标应用程序执行目标操作;所述交互控制模块还用于根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。
[0011 ]在其中一个实施例中,还包括语音采集模块;所述交互控制模块还用于控制所述智能终端处于静音模式;所述语音采集模块用于采集目标用户的语音信息;所述识别模块还用于识别所述语音信息并输出语音识别结果;所述交互控制模块还用于根据所述语音识别结果对所述目标应用程序执行相应的操作。
[0012]在其中一个实施例中,还包括语音采集模块;所述图像采集模块还用于采集目标区域范围内用户的手势图像;所述识别模块还用于根据所述手势图像识别用户手势并输出手势识别结果;所述手势识别结果为开启语音识别模式;所述交互控制模块还用于根据所述手势识别结果控制所述智能终端开启语音识别模式;所述语音采集模块用于采集用户的语音信息;所述识别模块还用于根据所述语音信息提取语音特征信息以获取发送者的用户身份信息;所述识别模块还用于识别所述语音信息并输出语音识别结果;所述语音识别结果为对目标应用程序执行目标操作;所述交互控制模块还用于根据所述语音识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。
[0013]在其中一个实施例中,还包括存储模块;所述存储模块用于存储用户身份信息以及与所述用户身份信息匹配的脸部特征信息;所述识别模块用于根据所述人脸图像提取用户的脸部特征信息,并根据所述脸部特征信息获取与所述脸部特征信息匹配的用户身份信息。
[0014]—种智能终端,安装有至少一种应用程序,还包括如前任一所述的智能终端控制系统。
[0015]上述智能终端控制方法和系统,在智能终端上的应用程序发出应用请求时,先采集目标区域范围内用户的人脸信息以判断出登录该应用程序的用户是否在目标区域范围内,仅当其在目标区域范围内才会展示该应用请求,并采集该用户的目标部位的运动轨迹从而根据其运动轨迹识别结果对应用程序的应用请求进行相应的应答操作,用户无需直接与智能终端接触或者借助其他设备即可进行应答操作,操作简单且信息安全性较好。
【附图说明】
[0016]图1为一实施例中的智能终端控制方法的流程图;
[0017]图2为另一实施例中的智能终端控制方法的流程图;
[0018]图3为又一实施例中的智能终端控制方法的流程图;
[0019]图4为一实施例中的智能终端控制系统的结构框图;
[0020]图5为另一实施例中的智能终端控制系统的结构框图。
【具体实施方式】
[0021]为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
[0022]—种智能终端控制方法和系统,用于对安装有至少一种应用程序的智能终端进行控制。该智能终端可以为智能电视、计算机、平板电脑以及智能游戏机等数码设备。这类智能终端通常具有较大的显示屏从而可以供多个用户同时进行视频观看或者信息共享等。因此,可以理解,本智能终端控制方法和系统同样可以适用于能够同时供多个用户进行观看的智能手机、IPAD等设备中。智能终端中安装的应用程序可以是系统自带的应用程序或者用户自行下载安装的第三方应用程序。该应用程序可以包括即时通信应用程序如MSN、QQ、微信、Facebook、飞信等,也可以包括短信、电话、E_mai 1、知识问答等应用程序。下文中均以智能电视为例进行说明,且智能电视上至少安装有MSN、QQ或者微信中的一种即时通信应用程序。
[0023]图1为一实施例中的智能终端控制方法的流程图,包括以下步骤:
[0024]S102,接收应用程序发送的应用请求。
[0025]智能终端启动后,部分应用程序会根据用户的设置或者使用进入后台运行。例如,用户在开启智能电视后,会运行安装在智能电视上的即时通信应用程序,如MSN、QQ或者微信以及E-mail等应用程序。通常,当用户不使用这些应用程序时,为节约资源,这些应用程序会进入后台运行。当这些应用程序接收到新的消息或者检测到相关的版本升级信息、异常信息等信息时,会向用户发送应用请求。传统的智能终端中,当QQ等应用程序接收到新的消息时,通常是通过图标闪烁的方式发出接收到新消息的提示或者通过语音进行提示,也有部分智能终端则会直接将接收到的新消息在显示屏上显示。因此,当该新消息为私人消息且有多个用户同时观看该智能终端时,就不容易实现个人的隐私保护。本实施例中,当应用程序发出应用请求时,并不会立即进行消息提示或者展示。
[0026]接收到的应用程序发送的应用请求中需要包含当前登录所述应用程序的用户身份信息。如果发送应用请求的应用程序为系统应用程序或者其他无需登录即可使用的应用程序时,将当前登录用户为智能终端的默认用户,即其用户信息为默认用户信息。默认用户可以由用户进行设定。默认用户可以为一个或者多个。在本实施例中,用户身份信息可以包括能够供智能终端进行唯一识别的用户名、用户ID等。
[0027]S104,采集目标区域范围内用户的人脸图像。
[0028]目标区域范围通常是指智能终端的显示屏前方区域,其范围大小则需要根据图像采集设备如摄像头的采集角度来确定。图像采集设备可以为智能终端自带的设备,也可以为通过连接端口接入到智能终端的外置设备。当目标区域范围内有多个用户时,会对多个用户均进行人脸图像采集。具体地,图像采集设备可以通过摄像获取目标区域范围内的图像,从而对采集到的图像上的人脸进行识别。在本实施例中,标定模块会对识别出来的人脸进行标定,如给识别出来的人脸设定一个标识符(例如代码)。标定模块也可以在人脸识别前进行标定。在本实施例中,图像采集设备会对目标区域范围内识别到的人脸进行运动跟踪,当检测到有用户离开时,标定模块会清除对该用户的标定,即停止该用户的标定代码的运用。当图像采集模块采集到有新的用户进入到目标区域范围内时,会通过跟踪技术仅采集新进入目标区域范围内的用户的人脸图像,并对该用户进行人脸识别后通过标定模块进行标定。
[0029]S106,根据采集的人脸图像识别用户身份信息。
[0030]具体地,根据采集到的人脸图像提取用户的脸部特征信息。由于不同的用户有不同的脸部特征信息,因此可以将提取到的脸部特征信息与预先存储的各用户的脸部特征信息进行比对,以确定采集到的人脸图像对应的用户身份信息。在本实施例中,智能终端会先存储常用用户身份信息以及与用户身份信息匹配的脸部特征信息,以便根据采集到的人脸图像识别用户身份信息。在其他的实施例中,智能终端还可以预先存储各用户身份信息以及与用户身份信息匹配的人脸图像,从而通过将采集到的人脸图像与预先存储的人脸图像进行比对,当相似度超过预设值时则可以认为二者相同,从而识别出该人脸图像所对应的用户身份信息。在另一实施例中,常用用户身份信息以及与用户身份信息匹配的脸部特征信息储存于云服务器或者远程服务器上。因此,智能终端可以从云服务器或者远程服务器上获取该相关?目息以完成人脸识别。
[0031]S108,判断识别到的用户身份信息是否与应用请求中的用户身份信息匹配。
[0032]通过判断识别到的用户身份信息是否与该应用请求中的用户身份信息匹配来判断当前登录发出该应用请求的应用程序的用户是否在目标区域范围内。例如,当前智能电视机中A登录的QQ发出了应用请求,那么对智能电视的目标区域范围内(正前方观看区域)的用户进行人脸识别从而确认A是否目标区域范围内,S卩A是否在观看智能电视。当判断出识别到的用户身份信息与应用请求中的用户身份信息匹配时(即登录发送应用请求的应用程序的用户在目标区域范围内时),执行SllO以及后续步骤,否则执行步骤S118。在本实施例中,S104是同时对智能终端的目标区域范围内的多个用户进行人脸图像采集。在其他的实施例中,S104、S106以及S108可以依次重复执行,即按顺序采集一个用户的人脸图像后对该用户进行身份识别并判断该用户身份信息是否与应用请求中的用户身份信息匹配,如果不是则继续执行S104、S106以及S108,直至S108的判断结果为是或者对目标区域范围内的所有用户均进行了判断。
[0033]S110,将匹配用户标定为目标用户,并展示该应用请求。
[0034]将匹配用户标定为目标用户主要是标定匹配用户的位置信息,从而方便后续操作。当确认目标用户在目标区域范围内后才展示该应用请求,从而可以避免目标用户不在目标区域范围内时展示应用请求对当前观看用户的干扰以及对登录用户信息的泄露,有利于提高信息安全性。应用请求可以直接显示在智能终端的预设位置处或者通过语音进行语音提示。当应用请求通过语音进行语音提示时,会在语音提示的同时控制智能终端上除目标应用程序之外的其它应用程序处于静音或者暂停等模式。
[0035]SI 12,采集目标用户的目标部位的运动轨迹。
[0036]当智能终端对应用请求进行展示后,即进入轨迹识别模式,对目标用户的目标部位的运动轨迹进行识别。在本实施例中,目标部位为头部。运动轨迹则是指头部摆动的轨迹,如左右摆动或者上下摆动等。在其他的实施例中,目标部位也可以为手部,运动轨迹则可用为手部摆动的轨迹或者手部最终静止时形成的静态手势。
[0037]S114,对采集到的运动轨迹进行识别并输出运动轨迹识别结果。
[0038]对采集到的运动轨迹进行识别从而输出运动轨迹识别结果。智能终端或者服务器上预先定义有运动轨迹库,且每一个运动轨迹对应于一应答指令。在本实施例中,目标部位为头部,因此,运动轨迹库中定义有点头运动轨迹和摇头动作轨迹,从而可以根据采集到的运动轨迹确定该头部运动为点头还是摇头动作。在其他的实施例中,目标部位也可以为手部,则运动轨迹库中可以根据需要定义运动轨迹,如左右摆动、上下摆动、前后摆动等运动轨迹,或者能够进行快速识别的字符轨迹,如“W”、“V”、“厂’等。
[0039]S116,根据运动轨迹识别结果对应用请求进行相应的应答操作。
[0040]运动轨迹库中在存储各自定义的运动轨迹的同时,还会存储与该运动轨迹一一对应的应答操作,如接受该应用请求、拒绝该应用请求等操作。
[0041 ]在本实施例中,运动轨迹库中定义点头运动轨迹对应的应答操作为接收该应答请求,即打开或者播放接收到的新消息;摇头则对应拒绝该应答请求,即不打开或者播放接收到的新消息同时控制不再展示该应用请求。例如,当检测到用户A在目标区域范围内时,智能电视展示QQ的应用请求,如“A有新消息,是否查看新消息”等。可以理解,展示的应用请求中同样会显示能够反映当前登录的用户身份信息的标识。因此,当A看到或者听到该应用请求时,如果想要查看该消息,则可以点头。智能电视采集到A的点头运动后,即可以确定A同意显示或者播放该新消息,则显示或者播放该新消息。当A不想在大家面前查看个人消息时,则可以摇头。智能电视采集到A的摇头动作后,即可以确定A不同意展示该新消息,则不对该新消息进行显示或播放,同时关闭对应用请求的展示,以不影响用户继续观看视频节目。
[0042]又例如,当某些应用程序检测到新的版本时,通常会发送是否进行自动版本升级的应用请求。通过上述控制方法同样可以对该应用请求做出应答操作。即当检测到当前登录该应用程序的用户(或者默认用户)在目标区域范围内时,展示该版本升级的应用请求,目标用户则可以在该应用请求展示后通过点头来同意升级或者通过摇头来拒绝该升级请求。
[0043]上述控制方法同样可以适用于智能终端的知识问答过程中。例如,当知识问答应用程序启动后,对目标用户的运动轨迹进行识别,从而根据识运动轨迹识别结果获取用户做出的答案并进入下一题的问答中。具体地,当识别到用户摇头时,即可确定用户做出的答案为“否”,当识别到用户点头时,即可确定用户做出的答案为“是”。又或者,可以预先定义答题选项所对应的运动轨迹或者静态手势,从而在用户做出相应手势或者运动轨迹后即可确定其答题选项为“A”或者“B”等。在本实施例中,存储模块还会存储用户的答题记录。
[0044]SI 18,不展示该应用请求。
[0045]当目标用户不在目标区域范围内时,不对该应用请求进行展示从而不会对当前用户的正常观看产生影响。
[0046]上述智能终端控制方法,在智能终端上的应用程序发出应用请求时先采集目标区域范围内用户的人脸信息以判断出登录该应用程序的用户是否在目标区域范围内,仅当其在目标区域范围内才会展示该应用请求,并采集该用户的目标部位的运动轨迹从而根据其运动轨迹识别结果对应用程序的应用请求进行相应的应答操作,用户无需直接与智能终端接触或者借助其他设备即可进行应答操作,操作简单且信息安全性较好。
[0047]在另一实施例中,上述智能终端控制方法还包括以下步骤,如图2所示。
[0048]S210,采集目标区域范围内用户的人脸图像和手势图像。
[0049]智能终端的图像采集模块会在每隔一间隔时长进行外部图像采集,以采集目标区域范围内用户的人脸图像和手势图像。
[0050]S220,根据采集到的人脸图像识别用户身份信息。
[0051]根据采集到的人脸图像就可以确定出该用户的身份信息。例如,将采集到的人脸图像进行特征提取,从而将提取到的脸部特征信息与预先存储的各用户的脸部特征信息进行比对,以识别该用户的身份信息。
[0052]S230,对该手势图像进行识别以输出手势识别结果。
[0053]在本实施例中,手势图像为静态手势图像。智能终端或者服务器同样会定义一手势库,从而将采集到的手势图像与手势库中的手势进行比对,以输出手势识别结果。
[0054]S240,根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。
[0055]具体地,手势库中手势均--对应一目标操作。例如,OK手势对应于打开QQ,V手势则对应于打开微信。因此,根据手势识别结果即可对以该用户身份信息进行登录的目标应用程序进行操作。又例如,当B用户想要打开其登录在智能电视中的QQ时,其只需要做出OK手势,图像采集模块采集到其脸部图像以及手势图像后即可对其身份以及手势进行识别,从而打开其登录的QQ。此操作过程同样无需用户接触智能终端或者借助遥控器等设备,方便用户操作。并且,用户仅能够打开以其身份信息登录的相应应用程序而不能打开其他用户登录的目标应用程序,从而进一步提高了信息安全性。
[0056]在本实施例中,上述智能终端控制方法还包括步骤S250?S270。
[0057]S250,控制智能终端处于静音模式。
[0058]当用户对目标应用程序进行操作时,为避免干扰,可以将智能终端设置为静音模式,以不影响用户对目标应用程序的操作。可以理解,可以通过将智能终端的音量调整至O或者将智能终端上当前正在运行的应用程序暂停来控制智能终端进入静音模式。
[0059]S260,采集目标用户的语音信息。
[0060]当用户发出对目标应用程序进行目标操作的指令后,该用户即可确定为目标用户。因此采集其发出的语音信息,以对该目标应用程序进行后续操作。仅对目标用户进行语音信息的采集,可以减少语音采集模块以及识别模块的工作量。
[0061]S270,识别该语音信息,并根据语音识别结果对目标应用程序执行相应操作。
[0062]通过对语音信息内容进行识别以识别出目标操作对象以及目标操作指令。例如,当B用户根据手势开启QQ后,其需要向其中一好友C发送语音信息,则可以发送“向C发送语音信息”、“发送语音信息给C”或者直接说C的名字“C”等语音信息。语音识别模块则可以根据接收到的语音信息识别出目标对象为C,目标操作为发送语音信息,则弹出C的对话窗口并开启录音功能。智能终端可以根据用户发送的语音指令、停顿时长以及其他动作控制录音模块结束录音并发送或者停止发送该录音。例如,可以通过用户的语音输入停顿时长大于预设时长时控制录音模块结束录音并发送该语音消息。当用户直接说出C的名字时,智能终端会从好友列表中查找到C,并弹出C的对话框。用户可以在弹出C的对话框后,通过输入相应的语音指令、手势等进行相应的操作,如发送语音信息、进行视频通话等。
[0063]通过上述智能终端控制方法,还可以对智能终端上的应用程序进行一些基本操作,从而方便用户操作。并且,操作同样仅能针对有权限的应用程序进行,提高了信息安全性。
[0064]在又一实施例中,上述智能终端控制方法还包括以下步骤,如图3所示。
[0065]S310,采集目标区域范围内用户的手势图像。
[0066]智能终端的图像采集模块会在每隔一间隔时长进行外部图像采集,以采集目标区域范围内用户的手势图像。在本实施例中,在进行手势图像识别时无需对脸部图像进行采集。
[0067]S320,根据采集到的手势图像识别用户手势并输出手势识别结果。
[0068]当仅对用户手势图像进行识别时,手势识别结果主要为开启语音识别模式。该手势可以由用户进行自定义,如定义手势为拳头时为开启语音识别模式。
[0069]S330,根据所述手势识别结果控制智能终端开启语音识别模式。
[0070]在控制智能终端开启语音识别模式的同时会控制智能终端进入静音模式,从而避免智能终端发出的声音对语音采集模块的语音采集产生干扰。
[0071]S340,采集用户的语音信息。
[0072]在进入语音识别模式后开始采集用户的语音信息。语音采集模块可以根据用户的停顿时长或者手势来确认是否结束语音信息的采集。
[0073]S350,根据采集到的语音信息提取语音特征信息以获取发送者的用户身份信息。
[0074]在本实施例中,智能终端会预先存储用户身份信息以及与之匹配的语音特征信息。因此,将提取到的语音特征信息与预存的语音特征信息进行比对以获取发送者的用户身份信息。
[0075]S360,识别该语音信息并输出语音识别结果。
[0076]对语音信息进行识别,以识别出目标应用程序和目标操作。例如,D用户需要开启QQ,则可以发送“开启QQ”或者“打开QQ”的语音信息。根据采集到的语音信息的语音特征信息可以确认该语音信息由D发送,并且目标应用程序为QQ,目标操作为打开。从而输出该识别结果,以便于交互控制模块打开D登录的QQ。
[0077]S370,根据该语音识别结果对以识别出的用户身份信息登录的目标应用程序执行目标操作。
[0078]根据识别到的语音结果就可以对以语音信息发送者的身份信息登录的目标应用程序执行目标操作。
[0079]图4为一实施例中的智能终端控制系统400的结构框图,该智能终端控制系统400包括接收模块402、图像采集模块404、识别模块406、判断模块408、标定模块410、展示模块412以及交互控制模块414。
[0080]接收模块402用于接收应用程序发出的应用请求。应用请求中包含当前登录该应用程序的用户身份信息。图像采集模块404用于采集目标区域范围内用户的人脸图像。识别模块406用于根据采集到的人脸图像识别用户身份信息。判断模块408用于判断识别到的用户身份信息是否与该应用请求中的用户身份信息匹配。标定模块410用于将匹配用户标定为目标用户。展示模块412则用于在判断模块408的判断结果为是时,展示该应用请求。图像采集模块404还用于采集目标用户的目标部位的运动轨迹。识别模块406则还用于对该运动轨迹进行识别并输出运动轨迹识别结果。交互控制模块414用于根据该运动轨迹识别结果对相应的应用请求进行相应的应答操作。
[0081]上述智能终端控制系统400,在智能终端上的应用程序发出应用请求时先采集目标区域范围内用户的人脸信息以判断出登录该应用程序的用户是否在目标区域范围内,仅当其在目标区域范围内才会展示该应用请求,并采集该用户的目标部位的运动轨迹从而根据其运动轨迹识别结果对应用程序的应用请求进行相应的应答操作,用户无需直接与智能终端接触或者借助其他设备即可进行应答操作,操作简单且信息安全性较好。
[0082]在另一实施例中,上述智能终端控制系统400还包括语音采集模块416,如图5所示。在本实施例中,图像采集模块404还用于采集目标区域范围内用户的人脸图像和手势图像。识别模块406还用于根据采集到的人脸图像识别用户身份信息,并对手势图像进行手势识别并输出手势识别结果。该手势识别结果为对与目标应用程序执行目标操作。交互控制模块414则还用于根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。在本实施例中,交互控制模块414还用于控制智能终端处于静音模式。语音采集模块416用于采集目标用户的语音信息。识别模块406还用于识别该语音信息并输出语音识别结果。交互控制模块414还用于根据该语音识别结果对目标应用程序执行相应的操作。
[0083]在另一实施例中,上述智能终端控制系统400中的图像采集模块404还用于采集目标区域范围内用户的手势图像。识别模块406还用于根据该手势图像识别用户手势并输出手势识别结果。该手势识别结果为开启语音识别模式。交互控制模块414还用于根据该手势识别结果控制智能终端开启语音识别模式。语音采集模块416用于采集用户的语音信息。识别模块406还用于根据该语音信息提取语音特征信息以获取发送者的用户身份信息,并识别该语音信息后输出语音识别结果。语音识别结果为对目标应用程序执行目标操作。交互控制模块414还用于根据该语音识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。
[0084]在本实施例中,上述智能终端控制系统400还包括存储模块418。存储模块418用于存储用户身份信息以及与该用户身份信息匹配的脸部特征信息以及语音特征信息等。在一实施例中,存储模块418设置于智能终端内或者直接利用智能终端内的存储器进行存储。在另一实施例中,存储模块418为云存储器或者远程服务器。
[0085]本发明提供一种智能终端,其安装有至少一种应用程序,且包含如前述任一实施例所述的智能终端控制系统。该智能终端可以为智能电视、计算机、平板电脑以及智能游戏机等数码设备。这类智能终端通常具有较大的显示屏从而可以供多个用户同时进行视频观看或者?目息共孚等。
[0086]以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
[0087]以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
【主权项】
1.一种智能终端控制方法,用于对安装有至少一种应用程序的智能终端进行控制;其特征在于,所述方法包括: 接收应用程序发出的应用请求;所述应用请求中包含当前登录所述应用程序的用户身份信息; 采集目标区域范围内用户的人脸图像; 根据所述人脸图像识别用户身份信息; 判断识别到的用户身份信息是否与所述应用请求中的用户身份信息匹配; 若是,则 将匹配用户标定为目标用户,并展示所述应用请求, 采集所述目标用户的目标部位的运动轨迹, 对所述运动轨迹进行识别并输出运动轨迹识别结果, 根据所述运动轨迹识别结果对所述应用请求进行相应的应答操作。2.根据权利要求1所述的智能终端控制方法,其特征在于,所述方法还包括步骤: 采集目标区域范围内用户的人脸图像和手势图像; 根据所述人脸图像识别用户身份信息; 对手势图像进行手势识别并输出手势识别结果;所述手势识别结果为对目标应用程序执行目标操作; 根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。3.根据权利要求2所述的智能终端控制方法,其特征在于,所述根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作的步骤之后还包括步骤: 控制所述智能终端处于静音模式; 采集目标用户的语音信息; 识别所述语音信息并输出语音识别结果;以及 根据所述语音识别结果对所述目标应用程序执行相应的操作。4.根据权利要求1所述的智能终端控制方法,其特征在于,所述方法还包括: 采集目标区域范围内用户的手势图像; 根据所述手势图像识别用户手势并输出手势识别结果;所述手势识别结果为开启语音识别模式; 根据所述手势识别结果控制所述智能终端开启语音识别模式; 采集用户的语音信息; 根据所述语音信息提取语音特征信息以获取发送者的用户身份信息; 识别所述语音信息并输出语音识别结果;所述语音识别结果为对目标应用程序执行目标操作; 根据所述语音识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。5.根据权利要求1所述的智能终端控制方法,其特征在于,所述方法还包括存储用户身份信息以及与所述用户身份信息匹配的脸部特征信息的步骤; 所述根据人脸图像识别用户身份信息的步骤包括: 根据所述人脸图像提取用户的脸部特征信息; 根据所述脸部特征信息获取与所述脸部特征信息匹配的用户身份信息。6.—种智能终端控制系统,用于对安装有至少一种应用程序的智能终端进行控制;其特征在于,包括: 接收模块,接收应用程序发出的应用请求;所述应用请求中包含当前登录所述应用程序的用户身份信息; 图像采集模块,用于采集目标区域范围内用户的人脸图像; 识别模块,用于根据所述人脸图像识别用户身份信息; 判断模块,用于判断识别到的用户身份信息是否与所述应用请求中的用户身份信息匹配; 标定模块,用于将匹配用户标定为目标用户; 展示模块,用于展示所述应用请求; 所述图像采集模块还用于采集所述目标用户的目标部位的运动轨迹; 所述识别模块还用于对所述运动轨迹进行识别并输出运动轨迹识别结果;以及 交互控制模块,用于根据所述运动轨迹识别结果对所述应用请求进行相应的应答操作。7.根据权利要求6所述的智能终端控制系统,其特征在于,所述图像采集模块还用于采集目标区域范围内用户的人脸图像和手势图像; 所述识别模块还用于根据所述人脸图像识别用户身份信息,并对手势图像进行手势识别后输出手势识别结果;所述手势识别结果为对目标应用程序执行目标操作; 所述交互控制模块还用于根据手势识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。8.根据权利要求7所述的智能终端控制系统,其特征在于,还包括语音采集模块;所述交互控制模块还用于控制所述智能终端处于静音模式; 所述语音采集模块用于采集目标用户的语音信息; 所述识别模块还用于识别所述语音信息并输出语音识别结果; 所述交互控制模块还用于根据所述语音识别结果对所述目标应用程序执行相应的操作。9.根据权利要求6所述的智能终端控制系统,其特征在于,还包括语音采集模块; 所述图像采集模块还用于采集目标区域范围内用户的手势图像; 所述识别模块还用于根据所述手势图像识别用户手势并输出手势识别结果;所述手势识别结果为开启语音识别模式; 所述交互控制模块还用于根据所述手势识别结果控制所述智能终端开启语音识别模式; 所述语音采集模块用于采集用户的语音信息; 所述识别模块还用于根据所述语音信息提取语音特征信息以获取发送者的用户身份信息; 所述识别模块还用于识别所述语音信息并输出语音识别结果;所述语音识别结果为对目标应用程序执行目标操作; 所述交互控制模块还用于根据所述语音识别结果对以识别到的用户身份信息登录的目标应用程序执行目标操作。10.根据权利要求6所述的智能终端控制系统,其特征在于,还包括存储模块;所述存储模块用于存储用户身份信息以及与所述用户身份信息匹配的脸部特征信息; 所述识别模块用于根据所述人脸图像提取用户的脸部特征信息,并根据所述脸部特征信息获取与所述脸部特征信息匹配的用户身份信息。11.一种智能终端,安装有至少一种应用程序,其特征在于,还包括如权利要求6?10任一所述的智能终端控制系统。
【文档编号】H04N21/4415GK105872685SQ201610173937
【公开日】2016年8月17日
【申请日】2016年3月24日
【发明人】刘国华
【申请人】深圳市国华识别科技开发有限公司