智能监控系统的控制方法、5G电视、系统和存储介质与流程

文档序号：25538754发布日期：2021-06-18 20:33阅读：76来源：国知局

本申请涉及智能监控技术领域，尤其涉及一种基于5g电视的智能监控系统的控制方法、5g电视、智能监控系统和计算机可读存储介质。

背景技术：

随着技术的不断发展，越来越多的家居设备出现在人们的家庭中，同时家居设备也越来越智能。随着智能家居设备的不断增多，必然会带来一定的问题，比如如何在智能家居设备数量越来越多的情况下，对每一个智能家居设备有一个很好的监控，以及对家庭成员安全的监控。

现在在对智能家居设备进行监控时，通常是采用设置在家庭各位置的监控设备完成对家庭的监控，包括智能家居设备以及成员，这样虽然实现了对智能家居设备的监控，但是需要额外配置有相应的监控设备，增加了投入成本，同时对应家庭成员的状态情况也不一定会及时有效的进行相应的反馈。

技术实现要素：

本申请提供一种基于5g电视的智能监控系统的控制方法、5g电视、智能监控系统以及存储介质，以在降低成本的情况下，实时对家庭场景进行监控，并及时准确的对所发生的异常情况进行反馈。

第一方面，本申请提供的一种基于5g电视的智能监控系统的控制方法，所述方法包括：

获取所述电视所采集到的图像信息，以及与所述电视组网的智能家居设备的状态信息；

根据所述图像信息以及所述状态信息确定是否需要进行信息反馈；

若确定需要进行信息反馈，则获取相应的反馈信息以发送至关联终端。

第二方面，本申请还提供一种5g电视，所述5g电视包括摄像装置、处理器和存储器；

所述摄像装置用于进行图像信息的采集；

所述存储器用于存储计算机程序；

所述处理器用于执行所述计算机程序并在执行所述计算机程序时实现上述所述的基于5g电视的智能监控系统的控制方法。

第三方面，本申请还提供一种智能监控系统，所述包括若干智能家居设备以及上述所述的5g电视。

第四方面，本申请还提供一种存储有计算机可读指令的存储介质，所述计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行上述基于5g电视的智能监控系统的控制方法的步骤。

本申请公开的一种基于5g电视的智能监控系统的控制方法中，利用电视实时进行图像信息的采集获取，同时智能监控系统会对各智能家居设备的状态信息进行监控，状态信息包括正常状态和异常状态，然后根据获取的图像信息以及状态信息确定是否需要进行信息反馈，最后在需要进行信息反馈时，将所得到的相应反馈信息发送至对应的关联终端。通过各智能家居设备的组网，实现了利用电视对家庭中各智能家居设备的状态的监控，同时利用电视对家庭状态信息的监控，进而在存在异常情况时，进行相应的反馈报警。可以及时有效的对智能家居设备或者家庭状态信息的异常情况进行反馈，更加有效的避免异常事件的发生。

附图说明

为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请一个实施例中智能监控系统的框图示意图；

图2为本申请一个实施例中基于5g电视的智能家居系统的监控方法的流程示意图；

图3为本申请一实施例中确定是否进行信息反馈的步骤的流程示意图；

图4为本申请一个实施例中一种感应区域设置的示意图；

图5为本申请一实施例中进行人脸图像录入的步骤的流程示意图；

图6为本申请一个实施例中提供的5g电视的结构示意性框图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。

应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

本申请的实施例提供了一种基于5g电视的智能监控系统的监控方法、5g电视、智能监控系统及存储介质。

下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。

请参阅图1，图1为本申请一个实施例中智能监控系统的框图示意图。

具体地，该智能监控系统10包括5g电视11以及智能家居设备12，其中，5g电视11和智能家居设备12通信连接，5g电视11用于对智能家居设备的状态进行实时监控和进行数据信息的及时传输，并在智能家居设备12中存在异常时，利用自身的信息反馈系统进行信息的反馈，将异常信息发送至相关联的终端设备(图中未标出)，以使得用户可以实时对智能家居设备的状态进行了解，并可以及时对异常状态进行处理。

在一些实施例中，所述智能家居设备12包括但不限于为智能冰箱、智能门锁、智能音箱以及智能风扇等。

另外，5g电上11设置有相应的图像采集装置，比如摄像头，用于对室内的状态进行实时监控，比如是谁在进行观影，再比如是否存在老人摔倒异常的情况，还比如是否存在陌生人的入侵。通过进行图像的采集和判断，可以及时对发生的异常事件进行处理。

需要说明的是，对于5g电视11的使用来说，可以有效的保证数据或者信息传输的及时性，使得在出现异常时可以第一时间让用户知道，以对异常事件进行相应的应对操作。

请参阅图2，图2为本申请一个实施例中基于5g电视的智能监控系统的监控方法的流程示意图。

具体地，该基于5g电视的智能监控系统的监控方法包括：

步骤s201、获取所述电视所采集到的图像信息，以及与所述电视组网的智能家居设备的状态信息。

在进行监控的过程中，包括对智能监控系统所处的室内的状态进行监控，以及对所有相关联的智能家居设备的状态进行监控，因此，将会获取电视所采集到的图像信息，以及与电视相组网的智能家居设备的状态信息。

在进行图像信息的获取时，利用电视上所设置的图像采集装置进行图像信息的采集，比如使用摄像头进行图像采集。在进行图像采集时，由于图像采集若实时存在，除了会提高运行负载，还可能会存在图像采集的无用性，比如连续性的进行图像采集会存在大量相同或者相似的图像，而在使用时却不会对判断过程有所影响，因此可以设定一定的图像采集周期，比如每间隔十分钟进行一次图像采集，或者每间隔三十分钟进行一次等，具体可以根据实际的需求进行设定。

对于与电视相组网的智能家居设备，也就是处于智能监控系统中的相关智能家居设备，对其状态信息的获取可以是实时的，这样可以更加及时的在出现异常运行时进行相应的操作。

同样地，也可以根据所处的时间设定相应的信息获取方式。由于在白天和晚上时，不同的智能家居设备的使用状态有所不同，比如白天可能会使用到电饭煲，但是在晚上或者深夜的时候不会使用到，因此对于不同的智能家居设备，可以设定不同的状态信息的获取规则。

另外，还可以直接设定一定的信息获取周期，比如每间隔一小时获取一次智能家居设备的状态信息。

步骤s202、根据所述图像信息以及所述状态信息确定是否需要进行信息反馈。

在获取得到所采集到的图像信息以及智能家居设备的状态信息之后，将会判断确定是否需要进行相应的信息反馈，在需要进行信息反馈时将会发出相应的反馈信息，在不需要进行信息反馈时，将会接着进行相应的监控判断。

在一些实施例中，若在需要进行信息反馈，则会及时进行相应的提示反馈，因此为了确定信息反馈的及时性，在实际应用中，确定是否需要进行信息反馈时，包括：若所述状态信息为正常状态，则根据所述图像信息确定是否需要进行信息反馈；若所述状态信息为异常状态，则确定处于异常状态的异常智能家居设备，以发送相应的设备异常信息至所述关联终端。

在对智能家居设备进行监控时，只要出现了满足进行信息反馈的条件的情况，都需要进行信息反馈，以使得用户可以及时做出相应的处理。满足进行信息反馈的条件包括智能家居设备出现异常情况，也就是在智能家居设备的使用状态出现问题时，避免危险事情的发生，需要及时进行相应的查看。需要说明的是，不管智能家居设备的数量有多少，只要存在一个处于异常情况的智能家居设备，那么此时所得到的智能家居设备的状态信息为异常状态，只有在所有的智能家居设备的都处于正常情况时，才说明智能家居设备的状态信息为正常状态。

另外，在一些实施例中，在根据所述图像信息确定是否需要进行信息反馈时包括：对所述图像信息进行分析处理，以根据是否存在行为异常确定是否进行信息反馈；若确定存在行为异常的情况，则确定需要进行信息反馈；若确定不存在行为异常的情况，则确定不需要进行信息反馈。

在智能家居设备处于正常状态时，将会对实际所采集到的图像信息进行分析判断确定是否满足其他的进行信息反馈的条件。比如在对图像信息进行分析处理时，确定有人摔倒，此时则需要进行相应的信息反馈。具体地，信息反馈的方式可以是电视发出相应的语音提示，也可以是向关联终端发送相应的提示信息。

另外，在根据图像信息确定是否进行信息反馈时，除了确定存在行为异常时进行信息反馈之外，还比如进行智能分析处理确定有外人入侵，则需要进行反馈，获取根据图像信息以及电视的运行状态确定观影时间过程等，也是需要进行相应的信息反馈。

在一些实施例中，在确定没有智能家居设备处于异常状态，也没有外人入侵时，将会根据人脸图像利用相应的反馈规则确定是否进行信息反馈，包括：若所述电视处于观影状态，则获取当前对应的观影时长；获取所述反馈规则对应的时间阈值，以根据所述观影时长以及所述事件阈值确定是否进行信息反馈；若所述观影时长小于或者等于时间阈值，则按照所述反馈规则进行信息反馈；若所述观影时长大于时间阈值，则确定需要进行信息反馈。

在实际应用中，在电视处于观影状态时，为了保证人们的健康，会在达到一定的情况时提醒用户进行休息，也就是停止观影。在电视处于观影状态时，没进行一次图像信息的获取都会获取当前时刻对应的观影时长，同时按照所得到的反馈规则得到对应的时间阈值，进而根据观影时长和时间阈值确定是否进行信息反馈。

具体地，若观影时长小于或者等于时间阈值，则确定不需要进行信息反馈；若观影时长大于时间阈值，则确定需要进行信息反馈。不同人对应的时间阈值可以不一样，比如小孩的观影时间阈值会比父母的观影时间阈值要小，因此在进行观影判断时，根据人脸图像对应的标识信息得到相应的时间阈值，然后将实际得到的观影时长与对应的时间阈值进行比较，确定需不需要进行信息反馈。

进一步地，若所获取的图像信息中所包含的人脸图像的数量大于一，在进行观影判断时，以时间阈值小的为准确定是否进行信息反馈。比如小孩和父母同时在看电视，在达到小孩的观影时间阈值时没有达到父母的观影时间阈值，但是此时还是会进行相应的信息反馈，以使得小孩避免长时间的观影而影响自身的身体健康。

步骤s203、若确定需要进行信息反馈，则获取相应的反馈信息以发送至关联终端。

在根据所采集到的图像信息以及所获取的状态信息确定需要进行信息反馈时，将会根据实际需要进行反馈的事件或者情况得到相应的反馈信息，进而将反馈信息发送至与智能监控系统相关的关联终端，其中反馈信息根据实际的异常状态或者异常信息所得到。

在确定需要进行信息反馈时，将会确定当前对应的异常情况，进而生成得到对应的包含有异常情况的反馈信息，比如在确定智能家居设备a运行异常时，所生成得到的反馈信息可以是“智能家居设备a运行异常”，再比如在确定智能家居设备均运行正常，但根据图像信息确定当前存在陌生人进入房子，此时所得到的反馈信息可以是“有陌生人入侵”。

在得到进行反馈的反馈信息之后，将会包反馈信息发送至于智能监控系统相关联的关联终端，其中关联终端可以是智能手机、平板电脑以及智能手表等可移动式设备，且信息反馈的方式可以是短信，也可以是利用相应的应用程序app的提示信息，具体不作限制。

在上述基于5g电视的智能监控系统的控制方法，电视会实时进行图像信息的采集获取，同时智能监控系统会对各智能家居设备的状态信息进行监控，状态信息包括正常状态和异常状态，然后根据获取的图像信息以及状态信息确定是否需要进行信息反馈，最后在需要进行信息反馈时，将所得到的相应反馈信息发送至对应的关联终端。通过各智能家居设备的组网，实现了利用电视对家庭中各智能家居设备的状态的监控，同时利用电视对家庭状态信息的监控，进而在存在异常情况时，进行相应的反馈报警。可以及时有效的对智能家居设备或者家庭状态信息的异常情况进行反馈，更加有效的避免异常事件的发生。

进一步地，参照图3，图3为本申请一实施例中确定是否进行信息反馈的步骤的流程示意图。

具体地，若所述状态信息为正常状态，则根据所述图像信息确定是否需要进行信息反馈，包括：

步骤s301、若所述状态信息为正常状态，则对所述图像信息进行人脸识别处理得到所述图像信息所包含的人脸图像；

步骤s302、根据所述人脸图像确定当前对应的监控模式；

步骤s303、根据所述监控模式对应的信息反馈规则以及所述人脸图像确定是否进行信息反馈。

在实际应用中，在确定智能家居设备中存在处于异常状态的智能家居设备时，将会确定需要进行信息反馈，同时会将生成得到的反馈信息发送至关联终端，以实现对异常状态的及时反馈。

在确定智能家居设备的状态信息为正常状态时，也就是智能家居设备中没有处于异常状态的设备时，将会对所采集得到的图像信息进行人脸识别处理，以得到图像信息中所包含的人脸图像，然后根据所得到的人脸图像得到当前对应的监控模式，进而根据所得到的监控模式对应的信息反馈规则以及人脸图像确定是否需要进行信息反馈。

在对智能家居设备的状态信息进行监控时，若确定所得到的状态信息为正常状态，也就是说明没有处于异常情况的智能家居设备，此时将会对当前所处的环境的状态进行确定，通过对所得到的图像信息进行人脸识别，确定图像信息中所包含的人脸图像，在实际应用过程中，所采集到的图像信息中可以包括有人脸图像，也可以不包括有人脸图像。

在确定所得到的图像信息中不包含有人脸图像时，此时由于智能家居设备本身也处于正常状态，且没有检测到有人员处于当前所对应的环境中，一般情况下，此时确定整个的监控系统所监控的设备以及环境处于正常状态，也就是此时不需要进行相应的信息反馈。

在确定所得到的图像信息中包含有人脸图像时，由于不同的人有着不同的行为习惯，因此对于不同的人来说，所对应的确定是否进行信息反馈的依据也是有所不同方式。比如对于小孩、老人以及年轻人，对于小孩来说，其对应的观影时间会有一定的限制，但是对于年轻人或者老人来说可能不会有这样的限制，或者说限制条件或者方式有所不同。对于老人来说，更关注的应该是老人的健康状态，显然对应的信息反馈方式也会不同。

在图像信息中包含有人脸图像，且识别了图像信息中所包含的人脸图像时，首先会识别人脸图像所对应的用户或者人是谁，比如是否是家庭成员中的一员，或者是家庭成员中的哪一位或者哪几位等。然后通过所得到的人脸图像确定对应的监控模式以及对应的信息反馈规则。

在一些实施例中，根据所得到的人脸图像确定当前对应的监控模式，包括：获取预设人脸图像库，以在所述预设人脸图像库中进行匹配确定所述人脸图像库中是否存在所述人脸图像；若确定所述预设人脸图像库中不存在所述人脸图像，则确定所述监控模式为入侵模式；若确定所述预设人脸图像库中存在所述人脸图像，则确定所述监控模式为安全模式。

预先在相应的人脸图像库中记录存储有家庭成员中各成员对应的人脸图像，在对人脸图像进行识别时，利用所得到的人脸图像与预先所存储的标记有用户信息的人脸图像进行对比，比如相似度的计算，确定所识别的人脸图像的标识信息，不同的标识信息代表着不同的用户，进而可以确定对应的信息反馈规则。

在确定识别所得到的人脸图像不存在于预设人脸图像库中时，确定肯定存在陌生人进入，那么此时所对应的监控模式将会是入侵模式。在确定识别多得到的人脸图像存储在于人脸图像库中时，确定此时所对应的监控模式属于安全模式，然后具体是否需要进行信息反馈将会根据此模式下对应的相关的信息和规则来确定。

具体地，在一些实施例中，在根据所述监控模式对应的信息反馈规则以及所述人脸图像确定是否进行信息反馈，包括：若所述监控模式为入侵模式，则获取所述人脸图像以得到相应的反馈信息，并将所述反馈信息发送至所述关联终端；若所述监控模式为安全模式，则根据所述人脸图像对应的标识信息得到对应的反馈规则，以根据所述人脸图像利用所述反馈规则确定是否进行信息反馈。

在确定当前的监控模式为入侵模式时，确定需要进行相应的信息反馈。为了可以及时准确的记录下入侵人员的相关信息，以可以更好地反馈给家庭主人，将会根据所得到的人脸图像生成得到相应的反馈信息，其中反馈信息中包含有入侵人员的人脸图像，然后将反馈信息发送至关联终端，也就是发送给家庭主人的终端。

在确定此时的监控模式为入侵模式时，将会利用电视进行图像和/或视频的采集和存储，然后在生成得到对应的反馈信息时，根据人脸图像生成得到相应的反馈信息以进行信息反馈，同时将所采集到的图像信息进行存储，以便于家庭主人利用图像信息和/或视频信息进行相应的操作，比如报案，可以更加有效的提供相应的证据，更有效的提高了安全性。

另外，在确定当前的监控模式为安全模式时，将会根据实际所采集到的人脸图像得到对应的信息反馈规则，其中安全模式包含有儿童模式、空闲模式、学习模式以及娱乐模式等。在处于不同的模式时，根据各自对应的规则进行相应的信息反馈。

比如，在确定人脸图像对应的标识信息为小孩，且此时电视正处于观影状态时，显然小孩不能处于长时间观影的状态，也就是会设置一定的观影时间阈值，在达到一定的时间之后将会进行相应的提示。在确定小孩是否超过观影时间阈值时，需要根据之前所获取的相关信息，包括电视的状态(观影状态和非观影状态)以及每一个采集到的小孩的人脸图像的时间信息等，通过所获取的时间信息确定小孩的观影时长，进而将实际的观影时长与观影时间阈值进行比较确定是否需要进行信息反馈。

再比如，在确定人脸图像对应的标识信息为小孩，且观影时长小于观影时间阈值时，还可以对小孩的观影状态进行信息提示。具体地，在小孩具体电视距离比较近时，将会进行相应的提示，以使得小孩可以保证一个合适的观影距离。在确定小孩与电视之间的距离时，可以利用相应的定位装置来确定，比如红外检测设备、传感器等。其中，红外检测设备可以准确的对位置进行定位；传感器可以设置一个感应范围，当处于感应范围内时，确定距离过近，反正则距离正常，具体可如图4所示，以电视为中心的一个半圆区域为感应范围，具体为图4中的区域a，即在区域a中是便可被感应到，之后在区域a之外才确定为合适的观影距离。图4中限制了感应区域的设置方式以及具体范围，但是在实际应用中不做限制，可以根据实际需求进行自定义设置，比如可以设置为规则的多边形区域，也可以设置为不规则的区域。

进一步地，参照图5，图5为本申请一实施例中进行人脸图像录入的步骤的流程示意图。

具体地，在一些实施例中，该方法还包括：

步骤s501、当接收到图像录入指令时，接收输入的待录入人脸图像以及所选择的录入规则；

步骤s502、根据所述录入规则将所述人脸图像进行存储。

人脸图像库中存储着预先所录入的人脸图像信息，同时还可以随时进行人脸图像信息的录入。在接收到图像录入指令时，接收输入的待录入人脸图像，以及接收所选择的录入规则，进而根据所选择的录入规则将待录入人脸图像进行存储。

在实际应用中，进行录入的人脸图像一般是将与家庭业主具有较为亲密的关系的人员的人脸图像进行录入，比如父母、配偶和子女，若只记录了业主以及亲密关系人员的人脸图像，那么业主的朋友来说，只要是进入拍照范围内都会被判断为已被入侵，现在这样并不是一个准确的判断，因此还可以通过录入相应的人脸图像信息避免这样的不准确的情况的出现。

具体地，在接收到图像录入指令时，在接收输入的人脸图像的同时还会接收用户所选择的录入规则，其中所输入的人脸图像可以是利用5g电视进行采集获取，也可以是利用关联终端进行获取，比如智能手机，通过选择则不同的录入规则，将人脸图像以不同的方式进行存储。

比如，对于业主的父母来说，可以选择亲密规则，也就是将父母的人脸图像永久进行记录存储，使得再次采集到的图像信息中所包含的人脸图像为父母的人脸图像时，不会被判断为入侵模式。

再比如，对于业主的朋友a来说，可以选择访客模式，其中访客模式中可以设定人脸图像的存储有效时间，在将朋友a的人脸图像进行存储时，使得在一定时间段内不会因为朋友a的进入而发出存在入侵情况的反馈信息。存储有效时间可以自定义设置，具体根据业主需求进行设置，比如进行设置的时间为2008年8月8日18:00，且想要设置的时间长短为3小时，那么在2008年8月8日18:00至2008年8月8日21:00之间所采集到的图像信息中包含有朋友a的人脸图像时，不会判定为存在入侵的情况，但是若是在2008年8月8日22:00时刻所采集到的图像信息中所包含的人脸图像为朋友a的人脸图像时，将会判定为存在被入侵的情况。

进一步地，在存在访客时，业主除了将访客的人脸图像进行录入之外，还可以预先进行相应的设置，比如在5g电视或者关联终端上进行相应的设置，使得5g电视处于访客模式，当处于访客模式时，将不会进行图像信息的采集获取，但是对智能家居设备状态的监控不会停止，当不处于访客模式之后，将会重新启动进行图像信息的采集。

在设置访客模式时，可以选择访客模式的有效时间，这样在过了有效时间时将取消访客模式。还可以不设置访客模式的有效时间，而是业主主动进行访客模式的关闭，同时在业主长时间没有关闭访客模式时，会发出相应的提示信息，以使得业主关闭访客模式，避免长期处于访客模式带来不便的情况。

如图6所示，图6为本申请一个实施例中提供的5g电视的结构示意性框图。该智能家居设备10包括摄像装置11、存储器12和处理器13，处理器12和存储器13通过系统总线14连接，其中，存储器12可以包括非易失性存储介质和内存储器。

非易失性存储介质可存储计算机程序。该计算机程序包括程序指令，该程序指令被执行时，可使得处理器12执行任意一种基于5g电视的智能监控系统的控制方法。

处理器12用于提供计算和控制能力，支撑整个智能家居设备的运行。

内存储器为非易失性存储介质中的计算机程序的运行提供环境，该计算机程序被处理器执行时，可使得处理器执行任意一种基于5g电视的智能监控系统的控制方法。

本领域技术人员可以理解，图6中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的终端的限定，具体的终端可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

应当理解的是，处理器12可以是中央处理单元(centralprocessingunit，cpu)，该处理器11还可以是其他通用处理器、数字信号处理器(digitalsignalprocessor，dsp)、专用集成电路(applicationspecificintegratedcircuit，asic)、现场可编程门阵列(field-programmablegatearray，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器12可以是微处理器或者该处理器也可以是任何常规的处理器等。

其中，在一个实施例中，所述存储器中存储有计算机程序，计算机程序被处理器12执行时，使得处理器执行所述计算机程序时实现以下步骤：

获取所述电视所采集到的图像信息，以及与所述电视组网的智能家居设备的状态信息；

根据所述图像信息以及所述状态信息确定是否需要进行信息反馈；

若确定需要进行信息反馈，则获取相应的反馈信息以发送至关联终端