本发明涉及摔倒识别,特别是涉及一种轻量型的摔倒识别的家庭看护系统、一种电子设备以及一种可读存储介质。
背景技术:
1、家庭看护话题一直都受到大家的关注和讨论,尤其在农村留守儿童和老人方面。随着大量的、低成本的家庭摄像头使用,基本解决了在外人员随时随地远程了解家庭状况的难题。但是不可能时刻都在看家庭监控摄像头,特别是老人发生跌倒危及生命的事情,更需要及时的干预和处理。又因为家庭摄像头普遍成本低、算力有限,因此亟需一种轻量型的摔倒检测识别来看护家庭的系统和设备。
技术实现思路
1、鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种轻量型的摔倒识别的家庭看护系统、一种电子设备以及一种可读存储介质。
2、本发明提供了一种轻量型的摔倒识别的家庭看护系统,包括:
3、图片获取和视频编码模块,用于从镜头传感器获取图片帧,并发送至摔倒检测识别模块,同时对所述图片帧进行h265视频编码保存到数据库中;
4、摔倒检测识别模块,用于在运行摔倒检测识别算法检测到摔倒行为时,提取摔倒人员的人体骨骼关键点信息并在利用所述人体骨骼关键点信息进行加强识别确认存在摔倒行为时,向业务处理模块上报摔倒行为事件;
5、业务处理模块,用于在接收到上报的摔倒行为事件时,通知预先配置的家庭相关人员。
6、可选地,所述摔倒检测识别模块还用于:
7、运行摔倒检测识别算法检测是否存在摔倒行为;
8、若检测到存在摔倒行为,则提取摔倒人员的人体骨骼关键点信息并在利用所述人体骨骼关键点信息进行加强识别确认存在摔倒行为时,向业务处理模块上报摔倒行为事件;
9、若未检测到摔倒行为,则等待图片获取和视频编码模块发送新的图片帧。
10、可选地,所述摔倒检测识别模块还用于:
11、利用所述人体骨骼关键点信息进行加强识别,分析是否存在摔倒行为;
12、若确认存在摔倒行为,向业务处理模块上报摔倒行为事件;
13、若确认未存在摔倒行为,则重新运行摔倒检测识别算法检测是否存在摔倒行为。
14、可选地,所述摔倒检测识别算法的轻量型摔倒检测神经网络由深度可分离卷积单元组成,深度可分离卷积单元包含逐点卷积、逐深度卷积、批量归一化bn、激活函数relu,参数量和计算量是3x3大小卷积核的1/9左右,适合部署在有限计算资源的家庭监控摄像头的平台上;
15、轻量型摔倒检测神经网络具体分为三部分:
16、骨干网络:采用vgg直筒型的网络结构,同时下采样使用计算量极小的最大池化操作;在stage1阶段前部分使用标准的3x3大小的卷积核,经过步长为2的3x3卷积和最大池化后,输出的特征图高宽变为输入图片的1/4;
17、特征金字塔融合层:上采样操作采取最近邻插值的方法;stage n层经过上采样与stage n-1层简单相加操作进行特征融合,以使低层网络拥有高层的语义信息;
18、多任务解耦head层:包括目标类别、目标框box、骨骼关键点;
19、损失函数loss包含类别损失、object置信度损失、框box损失、关键点point损失。
20、可选地,所述摔倒检测识别模块还用于:
21、提取摔倒人员的人体骨骼关键点信息并将所述人体骨骼关键点信息转化为骨骼特征向量;
22、将所述骨骼特征向量输入支持向量机,分析是否存在摔倒行为;
23、若确认存在摔倒行为,向业务处理模块上报摔倒行为事件。
24、可选地,所述业务处理模块还用于:支持远程在线查看和管理家庭监控摄像头。
25、可选地,所述业务处理模块通知预先配置的家庭相关人员的方式包括:发网络短信、通过微信小程序推送。
26、本发明还提供了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述电子设备执行所述计算机程序时,加载如本发明实施例任一项所述的轻量型的摔倒识别的家庭看护系统。
27、本发明还提供了一种可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时,加载如本发明实施例任一项所述的轻量型的摔倒识别的家庭看护系统。
28、本发明包括以下优点:
29、本发明的轻量型的摔倒识别的家庭看护系统,通过图片获取和视频编码模块从镜头传感器获取图片帧,并发送至摔倒检测识别模块,同时对所述图片帧进行h265视频编码保存到数据库中,摔倒检测识别模块在运行摔倒检测识别算法检测到摔倒行为时,提取摔倒人员的人体骨骼关键点信息并在利用所述人体骨骼关键点信息进行加强识别确认存在摔倒行为时,向业务处理模块上报摔倒行为事件,业务处理模块在接收到上报的摔倒行为事件时,通知预先配置的家庭相关人员。本发明该系统的轻量型的摔倒识别方案能够很好的部署在低成本的、有限算力的家庭监控摄像头上,为家庭老人、小孩的安全保驾护航发挥作用。
1.一种轻量型的摔倒识别的家庭看护系统,其特征在于,应用于家庭监控摄像头,包括:
2.根据权利要求1所述的轻量型的摔倒识别的家庭看护系统,其特征在于,
3.根据权利要求1所述的轻量型的摔倒识别的家庭看护系统,其特征在于,
4.根据权利要求1所述的轻量型的摔倒识别的家庭看护系统,其特征在于,
5.根据权利要求1所述的轻量型的摔倒识别的家庭看护系统,其特征在于,
6.根据权利要求1所述的轻量型的摔倒识别的家庭看护系统,其特征在于,
7.根据权利要求1所述的轻量型的摔倒识别的家庭看护系统,其特征在于,
8.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述电子设备执行所述计算机程序时,加载如权利要求1至7任一项所述的轻量型的摔倒识别的家庭看护系统。
9.一种可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时,加载如权利要求1至7任一项所述的轻量型的摔倒识别的家庭看护系统。