一种基于3D结构光的人脸识别系统及方法与流程

文档序号:27773738发布日期:2021-12-04 09:47阅读:388来源:国知局
一种基于3d结构光的人脸识别系统及方法
技术领域
1.本发明涉及一种基于3d结构光的人脸识别系统及方法。


背景技术:

2.结构光是一组由投影仪和摄像头组成的系统结构。用投影仪投射特定的光信息到物体表面后及背景后,由摄像头采集。根据物体造成的光信号的变化来计算物体的位置和深度等信息,进而复原整个三维空间。
3.3d结构光技术的基本原理是,通过近红外激光器,将具有一定结构特征的光线投射到被拍摄物体上,再由专门的红外摄像头进行采集。这种具备一定结构的光线,会因被摄物体的不同深度区域,而采集不同的图像相位信息,然后通过运算单元将这种结构的变化换算成深度信息,以此来获得三维结构。简单来说就是,通过光学手段获取被拍摄物体的三维结构,再将获取到的信息进行更深入的应用。
4.基于此,3d结构光目前经常用于安防、支付及门禁等实际应用场景中,为了保证用户数据的安全性,通常会采用人脸识别系统来对当前场景中的用户对象进行身份识别。
5.目前,部分人脸识别系统已经应用于商场中,而这种人脸识别系统,一般应用于自助结账售货机上,用户将各个商品的条形码自行扫描后选择人脸识别进行结算,这种人脸识别系统在应用时,一旦客户量较大,存在着容易堵塞的情况。


技术实现要素:

6.针对现有技术中的不足,本发明的目的是提供一种能够避免在结算时出现堵塞的基于3d结构光的人脸识别系统及方法。
7.本发明解决其技术问题所采用的技术方案是:
8.一种基于3d结构光的人脸识别系统,包括:
9.终端设备,用于对用户进行身份注册及密态人脸特征采集,并基于密态人脸特征生成特征码,将特征码和密态人脸特征发送至云服务器和进口验证端;
10.进口验证端,接收终端设备所发送的特征码进行存储,并将特征码发送至云服务器,包括有输入单元和进口闸机单元;
11.云服务器,接收终端设备所发送的特征码和密态人脸特征进行存储,并向商品验证端发送与该特征码相匹配的密态人脸特征;
12.商品验证端,接收云服务器所发送的密态人脸特征进行存储,并将正/负价格信息与匹配的密态人脸特征发送至出口验证端,包括有轨迹单元、第一人脸识别单元和价格单元;
13.出口验证端,接收商品验证端发送的正/负价格信息及与其匹配的密态人脸特征,并进行结算,包括有结算单元、第二人脸识别单元和出口闸门单元。
14.作为优选,还包括匹配单元,用于根据用户的特征码,从云服务器中存储的若干用户的密态人脸特征中寻找与该特征码对应的密态人脸特征进行匹配。
15.作为优选,还包括删除单元,用于根据商品验证端和出口验证端的密态人脸特征删除,当出口验证端完成结算后,删除商品验证端和出口验证端中对应的密态人脸特征。
16.作为优选,所述的终端设备包括有移动智能终端和固定智能终端,该移动智能终端和固定智能终端为具有图像采集、数据采集和数据传输功能的人机交互设备。
17.作为优选,所述第一人脸识别单元和第二人脸识别单元采用摄像头结合红外结构光收发器采集得到密态人脸特征。
18.作为优选,所述的输入单元包括有特征码读取单元和特征码输入单元,特征码读取单元通过nfc通信读取特征码验证卡上的特征码,特征码输入单元通过触摸屏直接输入特征码。
19.本发明所要解决的另一技术问题为提供一种基于3d结构光的人脸识别方法,包括:
20.终端设备对用户进行身份注册及密态人脸特征采集,并基于密态人脸特征生成特征码;
21.将密态人脸特征和特征码匹配后发送至云服务器和进口验证端;
22.进口验证端根据用户输入的特征码与生成的特征码进行匹配,并判断是否打开进口闸机单元;
23.当判断打开闸机时,云服务器向商品验证端发送与输入的特征码相匹配的密态人脸特征;
24.商品验证端在商品货架处进行用户的人脸特征采集,当采集成功时,打开货架,并进行商品取出或放入轨迹的判断;
25.根据商品的取出或放入轨迹,发送对应的正/负价格信息至出口验证端;
26.出口验证端进行用户的人脸特征采集,当采集成功时,匹配该密态人脸特征名下的正/负价格信息,并进行统计结算;
27.在结算成功后,打开出口闸机单元。
28.作为优选,当出口闸机单元打开后,删除单元发送删除命令使商品验证端和出口验证端内存储的密态人脸特征进行删除。
29.作为优选,商品取出或放入轨迹的判断方法为:
30.以侧面视角进行视频图像信息的采集,并基于视频图像信息分成九宫格,给每一区域赋值为零;
31.当打开货架时,进行扫描,当九宫格区域获取到商品样本时,使该区域赋值增加一,当九宫格区域失去商品样本时,使该区域赋值归零;
32.基于九宫格区域的赋值变化趋势,判断商品样本是取出/放入动作。
33.作为优选,用于无人售货商场。
34.本发明的有益效果是:
35.相比于传统的商场在最后阶段进行一一结算,本方案采用了预先计算的方式,经由在货架阶段进行商品正/负价格的收集,并将收集结果发送至出口端,最终经由出口端进行统算,避免了传统商场堵塞在出口端阶段进行结算的缺陷,即使在客流量较大的时候,也能够快速的进行结算,同时,该技术也更便于无人售货的普及使用。
具体实施方式
36.下面结合具体实施例对本发明作进一步说明,以使本领域技术人员可以更好的理解本发明并能予以实施,但所举实施例不作为对本发明的限定。
37.实施例
38.一种基于3d结构光的人脸识别系统,包括:
39.终端设备,用于对用户进行身份注册及密态人脸特征采集,并基于密态人脸特征生成特征码,将特征码和密态人脸特征发送至云服务器和进口验证端;
40.进口验证端,接收终端设备所发送的特征码进行存储,并将特征码发送至云服务器,包括有输入单元和进口闸机单元;
41.云服务器,接收终端设备所发送的特征码和密态人脸特征进行存储,并向商品验证端发送与该特征码相匹配的密态人脸特征;
42.商品验证端,接收云服务器所发送的密态人脸特征进行存储,并将正/负价格信息与匹配的密态人脸特征发送至出口验证端,包括有轨迹单元、第一人脸识别单元和价格单元;
43.出口验证端,接收商品验证端发送的正/负价格信息及与其匹配的密态人脸特征,并进行结算,包括有结算单元、第二人脸识别单元和出口闸门单元。
44.还包括匹配单元,用于根据用户的特征码,从云服务器中存储的若干用户的密态人脸特征中寻找与该特征码对应的密态人脸特征进行匹配。
45.还包括删除单元,用于根据商品验证端和出口验证端的密态人脸特征删除,当出口验证端完成结算后,删除商品验证端和出口验证端中对应的密态人脸特征。
46.所述的终端设备包括有移动智能终端和固定智能终端,该移动智能终端和固定智能终端为具有图像采集、数据采集和数据传输功能的人机交互设备。
47.所述第一人脸识别单元和第二人脸识别单元采用摄像头结合红外结构光收发器采集得到密态人脸特征。
48.所述的输入单元包括有特征码读取单元和特征码输入单元,特征码读取单元通过nfc通信读取特征码验证卡上的特征码,特征码输入单元通过触摸屏直接输入特征码。
49.一种基于3d结构光的人脸识别方法,包括:
50.终端设备对用户进行身份注册及密态人脸特征采集,并基于密态人脸特征生成特征码;
51.将密态人脸特征和特征码匹配后发送至云服务器和进口验证端;
52.进口验证端根据用户输入的特征码与生成的特征码进行匹配,并判断是否打开进口闸机单元;
53.当判断打开闸机时,云服务器向商品验证端发送与输入的特征码相匹配的密态人脸特征;
54.商品验证端在商品货架处进行用户的人脸特征采集,当采集成功时,打开货架,并进行商品取出或放入轨迹的判断;
55.根据商品的取出或放入轨迹,发送对应的正/负价格信息至出口验证端;
56.出口验证端进行用户的人脸特征采集,当采集成功时,匹配该密态人脸特征名下的正/负价格信息,并进行统计结算;
57.在结算成功后,打开出口闸机单元。
58.当出口闸机单元打开后,删除单元发送删除命令使商品验证端和出口验证端内存储的密态人脸特征进行删除。
59.商品取出或放入轨迹的判断方法为:
60.以侧面视角进行视频图像信息的采集,并基于视频图像信息分成九宫格,给每一区域赋值为零;
61.当打开货架时,进行扫描,当九宫格区域获取到商品样本时,使该区域赋值增加一,当九宫格区域失去商品样本时,使该区域赋值归零;
62.基于九宫格区域的赋值变化趋势,判断商品样本是取出/放入动作。
63.基于商品取出或放入轨迹判断的特点,在本方案中,商品验证端设置于货架的侧面位置,且货架上商品为分层设置,每层对应一轨迹单元,同时,货架上的商品采用盒装保证,对应轨迹单元的一侧贴标有商品识别特征,当该商品结算后,云服务器发送命令使该商品识别特征从轨迹单元中删除,当新商品入库时,云服务器发送命令使该商品识别单元重新录入轨迹单元中的存储芯片内。
64.本方案可用于无人售货商场,特别是无人售货商场的进出口及商品货架处。
65.在本方案中,也可采用tof技术来替换3d结构光技术进行人脸识别,但由于应用场景的因素,采用3d结构光技术更适用于无人售货商场这种偏静态的场景环境。
66.本发明的有益效果是:
67.相比于传统的商场在最后阶段进行一一结算,本方案采用了预先计算的方式,经由在货架阶段进行商品正/负价格的收集,并将收集结果发送至出口端,最终经由出口端进行统算,避免了传统商场堵塞在出口端阶段进行结算的缺陷,即使在客流量较大的时候,也能够快速的进行结算,同时,该技术也更便于无人售货的普及使用。
68.本发明的上述实施例并不是对本发明保护范围的限定,本发明的实施方式不限于此,凡此种种根据本发明的上述内容,按照本领域的普通技术知识和惯用手段,在不脱离本发明上述基本技术思想前提下,对本发明上述结构做出的其它多种形式的修改、替换或变更,均应落在本发明的保护范围之内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1