电梯乘客识别方法、装置、存储介质及设备与流程

本发明涉及计算机，尤其涉及一种电梯乘客识别方法、装置、存储介质及设备。

背景技术：

1、随着国家政策的推行与人们对更方便生活的追求，加装电梯成为很多老旧小区的选择，老旧小区加装电梯通常采样居民部分自费的方式，因此如何进行电梯精准收费成为急需解决的问题。

2、电梯精准收费的前提是对乘坐电梯人物的精准识别，现有识别方法主要有以下两种：

3、第一种为刷卡识别，在电梯内或者电梯每层门口安装一部刷卡机，同时为可乘坐电梯的每个居民发放一张电子卡片，该卡片包含持卡人的信息，当居民乘坐电梯时，需要首先进行刷卡，刷卡机记录下卡片对应的居民乘坐信息，刷卡后电梯才可启动。

4、第二种采用人脸识别的技术，该方案在电梯内或者电梯每层门口安装一部人脸识别机，所有可乘坐人员需要预先上传自己的人脸图像和对应的个人信息，当居民乘坐电梯时，需要首先对准人脸识别机，人脸识别机识别到可乘坐居民的人脸后才会将电梯设置为可乘坐状态。

5、上述两种方法存在两个问题，第一个问题为‘蹭梯’，即当第一个人刷卡或刷脸后，同行的其他人员都可乘坐电梯，这样就造成了电梯乘坐人员识别的遗漏。第二个问题是访客(包括居民亲属或者上门服务工作人员)不可乘坐，因为乘坐电梯需要卡片或者预先录入人脸，访客只能跟居民一同乘坐或者爬楼梯，造成了访客的极大不方便。

技术实现思路

1、鉴于以上技术问题，本发明提供了一种电梯乘客识别方法、装置、存储介质及设备，利用电梯内和楼道内多个摄像头的配合，精确追踪到乘坐电梯的每个人员进入或者离开哪一户，实现了对所有电梯乘坐人员的精准识别，进而可以实现对电梯乘坐人员的精准收费，解决了现有技术中存在的‘蹭梯’和访客不可识别问题。

2、本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

3、根据本发明的一方面，提出了一种电梯乘客识别方法，所述识别方法包括：

4、基于人物追踪算法和电梯内的第一摄像头，检测电梯内的每个人员的第一身体图像信息，并记录第一时间信息；

5、基于人物检测和出入户识别算法以及所有楼道内的多个第二摄像头，检测所有出门或入门人员的第二身体图像信息、对应的户号和第二时间信息；

6、基于人物重定位算法，将差值在阈值范围内的所述第一时间信息和所述第二时间信息关联，将关联的所述第一身体图像信息和所述第二身体图像信息进行一一匹配，得到所述第一身体图像信息对应的所述户号。

7、进一步的，所述检测电梯内的每个人员的第一身体图像信息，并记录第一时间信息，包括：

8、对拍摄到的视频流进行人物识别；

9、在识别出人物时，记录其全身图像和乘梯开始时间；

10、在被识别的人物被检测到离开电梯时，记录其乘梯结束时间，所述时间信息包括所述乘梯开始时间和所述乘梯结束时间。

11、进一步的，所述检测所有出门或入门人员的第二身体图像信息、对应的户号和第二时间信息，包括：

12、在检测前，标记出所有第二摄像头画面内所有的房门位置和对应的所述户号；

13、在任意所述第二摄像头画面内被检测的人物与被标记的房门相近或相接触时，截取所述第二摄像头画面内包含人物和房门的图像块；

14、将所述图像块输入到预训练好图像二分类网络中，确认被检测的人物是否正在入门或出门；

15、记录被确认为入门或出门的被检测人物的全身图像、当前的时间和所述户号。

16、进一步的，所述将关联的所述第一身体图像信息和所述第二身体图像信息进行一一匹配，得到所述第一身体图像信息对应的所述户号，包括：

17、根据所述第一身体图像信息对应的所述第一时间信息，筛选出对应所述第二时间信息的差值在阈值范围内的所有的所述第二身体图像信息；

18、计算筛选出的所述第二身体图像信息与所述第一身体图像信息的相似度，选择出相似度最高且大于设定阈值的所述第二身体图像信息，确认当前被匹配的所述第一身体图像信息的人员的所述户号。

19、进一步的，所述计算筛选出的所述第二身体图像信息与所述第一身体图像信息的相似度，包括：

20、将包含有人体全身的所述第一身体图像信息和所述第二身体图像信息分别输入到预训练的深度神经网络，得到对应的两个特征向量；

21、将两个所述特征向量的相似度为所述第一身体图像信息和所述第二身体图像信息的相似度，两个所述特征向量的相似度用向量间的夹角余弦值或向量间距离表示。

22、根据本公开的第二方面，提供一种电梯乘客识别装置，包括：

23、第一识别模块，用于基于人物追踪算法和电梯内的第一摄像头，检测电梯内的每个人员的第一身体图像信息，并记录第一时间信息；

24、第二识别模块，用于基于人物检测和出入户识别算法以及所有楼道内的多个第二摄像头，检测所有出门或入门人员的第二身体图像信息、对应的户号和第二时间信息；

25、分析模块，用于基于人物重定位算法，将差值在阈值范围内的所述第一时间信息和所述第二时间信息关联，将关联的所述第一身体图像信息和所述第二身体图像信息进行一一匹配，得到所述第一身体图像信息对应的所述户号。

26、根据本公开的第三方面，提供一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时实现如上述的电梯乘客识别方法。

27、根据本公开的第四方面，提供一种电梯乘客识别设备，包括：处理器；以及被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行上述的电梯乘客识别方法。

28、本公开的技术方案具有以下有益效果：

29、相比于现有基于刷卡或者人脸识别的电梯人物识别系统，本发明实现了对电梯所有人员的精准识别，因此解决了‘蹭梯’与访客不可乘坐问题；同时，本发明不需要让乘坐人员做任何额外的操作，人们的乘梯过程更加无感，因此体验更好。

技术特征：

1.一种电梯乘客识别方法，其特征在于，所述识别方法包括：

2.根据权利要求1所述的电梯乘客识别方法，其特征在于，所述检测电梯内的每个人员的第一身体图像信息，并记录第一时间信息，包括：

3.根据权利要求1所述的电梯乘客识别方法，其特征在于，所述检测所有出门或入门人员的第二身体图像信息、对应的户号和第二时间信息，包括：

4.根据权利要求1所述的电梯乘客识别方法，其特征在于，所述将关联的所述第一身体图像信息和所述第二身体图像信息进行一一匹配，得到所述第一身体图像信息对应的所述户号，包括：

5.根据权利要求4所述的电梯乘客识别方法，其特征在于，所述计算筛选出的所述第二身体图像信息与所述第一身体图像信息的相似度，包括：

6.一种电梯乘客识别装置，其特征在于，包括：

7.一种电梯乘客识别设备，其特征在于，所述设备包括：

8.一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如权利要求1-5中任一项所述的电梯乘客识别方法。

技术总结
本发明公开一种电梯乘客识别方法、装置、存储介质及设备，方法包括：基于人物追踪算法和电梯内的第一摄像头，检测电梯内的每个人员的第一身体图像信息，并记录第一时间信息；基于人物检测和出入户识别算法以及所有楼道内的多个第二摄像头，检测所有出门或入门人员的第二身体图像信息、对应的户号和第二时间信息；基于人物重定位算法，将差值在阈值范围内的第一时间信息和第二时间信息关联，将关联的第一身体图像信息和第二身体图像信息进行一一匹配，得到第一身体图像信息对应的户号。通过本发明，实现了对电梯所有人员的精准识别，因此解决了‘蹭梯’与访客不可乘坐问题；同时，本发明让人们的乘梯过程更加无感，因此体验更好。

技术研发人员：彭善喜,魏虎
受保护的技术使用者：神州通立电梯有限公司
技术研发日：
技术公布日：2024/1/16