智能电视留信系统和方法
【专利摘要】一种智能电视留信系统，包括：图像采集模块，用于采集外部图像；语音采集模块，用于采集外部语音；手势识别模块，用于识别用户手势并输出手势识别结果，所述手势识别结果为启动留信模式或关闭留信模式；语音识别模块，用于识别用户语音，并根据语音识别结果获取留信对象对应的预存留信文件夹；人脸识别模块，用于识别人脸并根据人脸识别结果输出对应的预存留信文件夹；播放控制模块，用于根据所述对应的预存留信文件夹开始播放留信视频。还提供一种智能电视留信方法。本发明可以实现电视的视频留信功能。
【专利说明】智能电视留信系统和方法
【技术领域】
[0001]本发明涉及图像识别及电视机控制领域，特别是涉及一种智能电视留信系统和方法。
【背景技术】
[0002]电视作为一种大众化的休闲家电产品早已普及进入千家万户，随着经济发展与社会进步，特别是有线电视、数字电视技术的应用与推广，智能电视已经成为新一代电视的代名词。
[0003]我们外出离开家时，一般给家人留信都是写纸条或者发信息，比较费时费力，特别是父母早晨上班前想给3岁的小孩告别，孩子还在睡觉，这时就不便吵醒孩子，于是会想到利用电视等电子产品实现留信。然而，现有智能电视应用还局限在收看广播电视、与用户进行简单交互等方面，不能利用电视结合人脸识别、手势识别、语音识别等识别技术进行视频留信功能，从而限制了智能电视的功能。
【发明内容】
[0004]基于此，有必要提供一种可以实现视频留信功能的智能电视留信系统和方法。
[0005]一种智能电视留信系统，包括:
[0006]图像采集模块，用于采集外部图像，所述外部图像包括用户手势和人脸；
[0007]声音采集模块，用于采集用户语音；
[0008]手势识别模块，用于识别用户手势并输出手势识别结果，所述手势识别结果为启动留信模式或关闭留信模式；其中，启动留信模式为启动语音识别模块的语音识别模式、启动所述图像采集模块的录像模式和所述语音采集模块的录音模式进行留信；关闭留信模式为关闭图像采集模块的录像模式和语音采集模块的录音模式以及将留信视频存储在留信对象对应的预存留信文件夹中；
[0009]语音识别模块，用于识别用户语音，并根据语音识别结果获取留信对象对应的预存留信文件夹；
[0010]人脸识别模块，用于识别人脸并根据人脸识别结果输出对应的预存留信文件夹；
[0011]播放控制模块，用于根据所述对应的预存留信文件夹开始播放留信视频。
[0012]在其中一个实施例中，所述语音识别模块包括:
[0013]第一检测单元，用于检测是否存在与所述留信对象对应的预存留信文件夹，若是，则获取留信对象对应的预存留信文件夹。
[0014]在其中一个实施例中，所述播放控制模块包括:
[0015]第二检测单元，用于检测存储在所述对应的预存留信文件夹中的留信视频是否被标定，若否，播放存储在所述对应的预存留信文件夹中的留信视频；
[0016]标定单元，用于对播放后的留信视频进行标定。
[0017]在其中一个实施例中，还包括排序模块，用于将存储在同一个预存留信文件夹里的留信视频按存储时间的先后顺序进行排序，所述播放控制模块根据排序结果依次播放留?目视频。
[0018]在其中一个实施例中，所述播放控制模块还用于在播放留信视频后启动所述图像采集模块与所述语音采集模块对外部图像和语音进行采集，并将采集的图像和语音作为反馈视频存储在留信者对应的预存留信文件夹中。
[0019]一种智能电视留信方法，包括:
[0020]采集外部图像和用户语音，所述外部图像包括用户手势和人脸；
[0021]识别用户手势并输出手势识别结果，所述手势识别结果为启动留信模式或关闭留信模式；其中，启动留信模式为启动语音识别模块的语音识别模式、启动所述图像采集模块的录像模式和所述语音采集模块的录音模式进行留信；关闭留信模式为关闭图像采集模块的录像模式和语音采集模块的录音模式以及将留信视频存储在留信对象对应的预存留信文件夹中；
[0022]识别用户语音，并根据语音识别结果获取留信对象对应的预存留信文件夹；
[0023]识别人脸并根据人脸识别结果输出对应的预存留信文件夹；
[0024]根据所述对应的预存留信文件夹开始播放留信视频。
[0025]在其中一个实施例中，所述获取留信对象对应的预存留信文件夹的步骤具体为:
[0026]检测是否存在与所述留信对象对应的预存留信文件夹，若是，则获取留信对象对应的预存留信文件夹。
[0027]在其中一个实施例中，根据所述对应的预存留信文件夹播放留信视频的步骤具体包括:
[0028]检测存储在所述对应的预存留信文件夹中的留信视频是否被标定，若否，播放存储在所述对应的预存留信文件夹中的留信视频；
[0029]标定单元，用于对播放后的留信视频进行标定。
[0030]在其中一个实施例中，还包括将存储在同一个预存留信文件夹里的留信视频按存储时间的先后顺序进彳丁排序的步骤。
[0031]在其中一个实施例中，根据所述对应的预存留信文件夹播放留信视频的步骤后还包括:
[0032]对外部图像和语音进行采集，并将采集的图像和语音作为反馈视频存储在留信者对应的预存留信文件夹中；
[0033]识别人脸并根据人脸识别结果输出留信者对应的预存文件夹；
[0034]根据留信者对应的预存文件夹播放反馈视频。
[0035]上述智能电视留信系统和方法通过识别用户手势的方式启动留信模式以进行留信，通过语音识别模块识别用户语音并根据语音识别结果获取留信对象对应的预存留信文件夹；留信之后再通过人脸识别的方式控制留信视频的播放，这样充分结合了人脸识别、手势识别、语音识别等识别技术进行视频留信功能，进一步扩展了智能电视的功能。
【专利附图】
【附图说明】
[0036]图1为一实施例中智能电视留信系统框架图；
[0037]图2为一实施例中智能电视留信方法流程图。
【具体实施方式】
[0038]请参考图1，为一实施例中智能电视留信系统框架图。
[0039]该智能电视留信系统包括图像采集模块110、手势识别模块120、语音采集模块130、语音识别模块140、人脸识别模块150以及播放控制模块160。
[0040]图像采集模块110外接一个专用的摄像头，用于采集外部图像，所述外部图像包括用户手势或人脸。图像采集模块110可以设置为录像模式进行录像。
[0041]比如，妈妈早上要去上班，5岁宝宝还没有起床，宝宝起床后不见妈妈，心情就会不好。那么，妈妈就可以在上班之前通过该智能电视留信系统给宝宝留信。妈妈只需在摄像头可视的范围内做一个开启语音识别模式的手势即可。
[0042]手势识别模块120用于识别用户手势并输出手势识别结果，所述手势识别结果为启动留信模式或关闭留信模式。其中，启动留信模式为启动语音识别模块140的语音识别模式、启动图像采集模块110的录像模式和语音采集模块130的录音模式进行留信。关闭留信模式为关闭图像采集模块110的录像模式和语音采集模块130的录音模式以及将留信视频存储在留信对象对应的预存留信文件夹中。
[0043]如果用户做出启动留信模式的手势，手势识别模块120将该手势与预设手势模版进行对比，输出手势识别结果为启动留信模式。
[0044]在本实施例中，预设手势模版可以自定义设置。
[0045]留信模式启动以后，就会自动开启语音识别模块140的语音识别模式。语音识别模块140用于识别用户输入的语音，并根据语音识别结果获取留信对象对应的预存留信文件夹。比如，妈妈在摄像头可视的范围内，人脸识别模块150就会自动识别出妈妈。妈妈做出一个启动留信模式的手势之后，说:“宝宝。”这时，语音识别模块140会识别妈妈的语音，并根据语音识别结果找到宝宝的信箱，然后再启动图像采集模块110的录像模式及语音采集模块130的录音模式进行留信。这样，妈妈就可以将给宝宝说的话通过录像的方式录下来。
[0046]完成录像之后，妈妈再次对着摄像头做出一个关闭留信模式的手势，根据手势识别结果结束录像，并将留信视频存储到该预存留信文件夹中。
[0047]可以理解，在其他实施例中，妈妈还可以离开摄像头可视范围表示留信结束以关闭留信模式。
[0048]进一步地，用户还可以做出其他不同手势，使得所述手势识别结果为开机、关机等。
[0049]可以理解，在其他实施例中，妈妈还可以通过电视之外的其他智能终端(如手机、电脑等)进行留信，并将留信内容发送到留信对象对应的预存留信文件夹中。
[0050]在本实施例中，语音识别模块140包括第一检测单元，用于检测是否存在与所述留信对象对应的预存留信文件夹，若是，则获取留信对象对应的预存留信文件夹。
[0051]比如，宝宝被送去姥姥家暂住两天，早上姥姥起床去买菜，怕宝宝醒来后不见姥姥会不开心，于是姥姥通过智能电视留信的方式给宝宝留信。但由于姥姥家的电视没有注册宝宝的信息，这时所述第一检测单元就无法检测到与宝宝对应的预存留信文件夹，即无法通过智能电视给宝宝留信。这种情况，会提示用户先注册一个留信文件夹作为预存留信文件夹。
[0052]人脸识别模块150用于识别人脸并根据人脸识别结果输出对应的预存留信文件夹。
[0053]比如，早上妈妈给宝宝留信后去上班了，宝宝起床后到处找妈妈，当宝宝进入摄像头的可视范围内后，人脸识别模块150便会识别出这是宝宝，于是输出宝宝对应的预存留信文件夹。
[0054]在本实施例中，人脸识别模块150包括第二检测单元和标定单元。其中，所述第二检测单元用于检测存储在所述对应的预存留信文件夹中的留信视频是否被标定，若否，播放存储在所述对应的预存留信文件夹中的留信视频。所述标定单元用于对播放后的留信视频进行标定。
[0055]一般情况下，只有在留信对象第一次出现在摄像头的可视范围内，留信视频才会进行自动播放。当留信视频播放完之后，所述标定单元便会对留信视频进行标定。如果妈妈或宝宝想过一段时间再看，需要其他操作流程，才会播放。
[0056]播放控制模块160用于根据所述对应的预存留信文件夹开始播放留信视频。
[0057]在其他实施例中，还包括排序模块。所述排序模块用于将存储在同一个预存留信文件夹里的留信视频按存储时间的先后顺序进行排序，播放控制模块150根据排序结果依次播放留信视频。
[0058]比如，妈妈在完成第一次录像之后，突然记起还有其他事情要跟宝宝交待，于是进行第二次留信。或者爸爸出差或上班之前也给宝宝留信了，那么宝宝对应的预存留信文件夹里可能就会有多个留信视频，这时所述排序模块便会将存储在宝宝对应的预存留信文件夹里的所有留信视频按存储时间的先后顺序进行排序。
[0059]进一步地，播放控制模块160还用于在开始播放留信视频后启动图像采集模块110与语音采集模块130对外部图像和语音进行采集，并将采集的图像和语音作为反馈视频存储在留信者对应的预存留信文件夹中。
[0060]具体地，人脸识别模块150在识别到是宝宝后，播放控制模块160就会播放妈妈给宝宝录的留信视频。这时，播放控制模块160会启动图像采集模块110与语音采集模块130将宝宝的表情、动作、语音等录下来作为反馈视频存储在妈妈对应的预存留信文件夹中。这样，当妈妈回来之后，人脸识别模块150识别出妈妈的人脸之后，播放控制模块160便会自动播放所述反馈视频。
[0061]还提供一种智能电视留信方法，包括:
[0062]采集外部图像和用户语音，所述外部图像包括用户手势和人脸；
[0063]识别用户手势并输出手势识别结果，所述手势识别结果为启动留信模式或关闭留信模式；其中，启动留信模式为启动语音识别模块的语音识别模式、启动所述图像采集模块的录像模式和所述语音采集模块的录音模式进行留信；关闭留信模式为关闭图像采集模块的录像模式和语音采集模块的录音模式以及将留信视频存储在留信对象对应的预存留信文件夹中；
[0064]识别用户语音，并根据语音识别结果获取留信对象对应的预存留信文件夹；
[0065]识别人脸并根据人脸识别结果输出对应的预存留信文件夹；
[0066]根据所述对应的预存留信文件夹开始播放留信视频。
[0067]请参考图2，为一实施例中智能电视留信方法流程图。
[0068]该智能电视留信方法包括:
[0069]步骤SllO:采集用户手势、人脸和语音。
[0070]步骤S120:识别用户手势，并根据手势识别结果启动留信模式。
[0071]其中，启动留信模式为启动语音识别模式、启动录像模式和录音模式进行留信。即留信模式启动后，会自动识别用户语音，并根据语音识别结果获取留信对象对应的预存留信文件夹。
[0072]在本实施例中，所述获取留信对象对应的预存留信文件夹的步骤具体为:
[0073]检测是否存在与所述留信对象对应的预存留信文件夹，若是，则获取留信对象对应的预存留信文件夹。
[0074]步骤S130:识别用户手势，并根据手势识别结果关闭留信模式。
[0075]其中，关闭留信模式为关闭图像采集模块的录像模式和语音采集模块的录音模式以及将留信视频存储在留信对象对应的预存留信文件夹中
[0076]步骤S140:采集用户人脸；
[0077]步骤S150:识别人脸并根据人脸识别结果输出对应的预存留信文件夹。
[0078]步骤S160:根据所述对应的预存留信文件夹开始播放留信视频。
[0079]在本实施例中，步骤S160具体包括:
[0080]检测存储在所述对应的预存留信文件夹中的留信视频是否被标定，若否，播放存储在所述对应的预存留信文件夹中的留信视频；
[0081]标定单元，用于对播放后的留信视频进行标定。
[0082]在其他实施例中，还包括将存储在同一个预存留信文件夹里的留信视频按存储时间的先后顺序进彳丁排序的步骤。
[0083]进一步地，步骤S160之后包括:
[0084]对外部图像和语音进行采集，并将采集的图像和语音作为反馈视频存储在留信者对应的预存留信文件夹中；
[0085]识别人脸并根据人脸识别结果输出留信者对应的预存文件夹；
[0086]根据留信者对应的预存文件夹播放反馈视频。
[0087]上述智能电视留信系统和方法通过识别用户手势的方式启动留信模式以进行留信，通过语音识别模块识别用户语音并根据语音识别结果获取留信对象对应的预存留信文件夹；留信之后再通过人脸识别的方式控制留信视频的播放，这样充分结合了人脸识别、手势识别、语音识别等识别技术进行视频留信功能，进一步扩展了智能电视的功能。
[0088]以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
【权利要求】
1.一种智能电视留信系统，其特征在于，包括: 图像采集模块，用于采集外部图像，所述外部图像包括用户手势和人脸； 语音采集模块，用于采集用户语音； 手势识别模块，用于识别用户手势并输出手势识别结果，所述手势识别结果为启动留信模式或关闭留信模式；其中，启动留信模式为启动语音识别模块的语音识别模式、启动所述图像采集模块的录像模式和所述语音采集模块的录音模式进行留信；关闭留信模式为关闭图像采集模块的录像模式和语音采集模块的录音模式以及将留信视频存储在留信对象对应的预存留信文件夹中； 语音识别模块，用于识别用户语音，并根据语音识别结果获取留信对象对应的预存留信文件夹； 人脸识别模块，用于识别人脸并根据人脸识别结果输出对应的预存留信文件夹； 播放控制模块，用于根据所述对应的预存留信文件夹开始播放留信视频。
2.根据权利要求1所述的智能电视留信系统，其特征在于，所述语音识别模块包括: 第一检测单元，用于检测是否存在与所述留信对象对应的预存留信文件夹，若是，则获取留信对象对应的预存留信文件夹。
3.根据权利要求1所述的智能电视留信系统，其特征在于，所述播放控制模块包括: 第二检测单元，用于检测存储在所述对应的预存留信文件夹中的留信视频是否被标定，若否，播放存储在所述对应的预存留信文件夹中的留信视频； 标定单元，用于对播放后的留信视频进行标定。
4.根据权利要求1所述的智能电视留信系统，其特征在于，还包括排序模块，用于将存储在同一个预存留信文件夹里的留信视频按存储时间的先后顺序进行排序，所述播放控制模块根据排序结果依次播放留信视频。
5.根据权利要求1所述的智能电视留信系统，其特征在于，所述播放控制模块还用于在开始播放留信视频后启动所述图像采集模块与所述语音采集模块对外部图像和语音进行采集，并将采集的图像和语音作为反馈视频存储在留信者对应的预存留信文件夹中。
6.一种智能电视留信方法，其特征在于，包括: 采集外部图像和用户语音，所述外部图像包括用户手势和人脸； 识别用户手势并输出手势识别结果，所述手势识别结果为启动留信模式或关闭留信模式；其中，启动留信模式为启动语音识别模块的语音识别模式、启动所述图像采集模块的录像模式和所述语音采集模块的录音模式进行留信；关闭留信模式为关闭图像采集模块的录像模式和语音采集模块的录音模式以及将留信视频存储在留信对象对应的预存留信文件夹中； 识别用户语音，并根据语音识别结果获取留信对象对应的预存留信文件夹； 识别人脸并根据人脸识别结果输出对应的预存留信文件夹； 根据所述对应的预存留信文件夹开始播放留信视频。
7.根据权利要求6所述的智能电视留信方法，其特征在于，所述获取留信对象对应的预存留信文件夹的步骤具体为: 检测是否存在与所述留信对象对应的预存留信文件夹，若是，则获取留信对象对应的预存留信文件夹。
8.根据权利要求6所述的智能电视留信方法，其特征在于，根据所述对应的预存留信文件夹播放留信视频的步骤具体包括: 检测存储在所述对应的预存留信文件夹中的留信视频是否被标定，若否，播放存储在所述对应的预存留信文件夹中的留信视频； 标定单元，用于对播放后的留信视频进行标定。
9.根据权利要求8所述的智能电视留信方法，其特征在于，还包括将存储在同一个预存留信文件夹里的留信视频按存储时间的先后顺序进行排序的步骤。
10.根据权利要求6所述的智能电视留信方法，其特征在于，根据所述对应的预存留信文件夹开始播放留信视频的步骤后还包括: 对外部图像和语音进行采集，并将采集的图像和语音作为反馈视频存储在留信者对应的预存留信文件夹中； 识别人脸并根据人脸识别结果输出留信者对应的预存文件夹； 根据留信者对应的预存文件夹播放反馈视频。
【文档编号】H04N21/41GK104519385SQ201410757947
【公开日】2015年4月15日 申请日期:2014年12月10日 优先权日:2014年12月10日
【发明者】刘国华 申请人:深圳市国华识别科技开发有限公司