物品携带提醒方法、装置、设备及存储介质与流程

文档序号:33318065发布日期:2023-03-03 17:00阅读:30来源:国知局
物品携带提醒方法、装置、设备及存储介质与流程

1.本发明涉及智能家居技术领域,尤其涉及一种物品携带提醒方法、装置、设备及存储介质。


背景技术:

2.目前,用户往往通过设置定时闹钟来提醒携带物品出门。但是,由于上述方式是在固定时间点进行提醒,而不是在用户出门时进行提醒,从而导致在真正出门时,容易出现遗忘。
3.上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。


技术实现要素:

4.本发明的主要目的在于提供一种物品携带提醒方法、装置、设备及存储介质,旨在解决现有技术中通过定时的闹钟提醒用户携带物品出门,存在真正出门时,容易遗忘的技术问题。
5.为实现上述目的,本发明提供一种物品携带提醒方法,所述物品携带提醒方法包括以下步骤:
6.在检测到用户的出门准备动作时,确定所述用户的待携带物品;
7.检测所述用户的已携带物品,并根据所述待携带物品和所述已携带物品确定所述用户的未携带物品;
8.在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息。
9.可选地,所述在检测到用户的出门准备动作时,确定所述用户的待携带物品的步骤,包括:
10.在检测到用户的出门准备动作时,采集所述用户的用户图像;
11.根据所述用户图像确定所述用户的待携带物品。
12.可选地,所述根据所述用户图像确定所述用户的待携带物品的步骤,包括:
13.对所述用户图像进行图像识别,获得用户人脸图像,并查找所述用户人脸图像对应的用户设定携带物品;
14.查找所述用户设定携带物品的提醒时间区间;
15.获取当前时间,并根据所述当前时间和所述提醒时间区间对所述用户设定携带物品进行筛选,获得所述用户的待携带物品。
16.可选地,所述在检测到用户的出门准备动作时,确定所述用户的待携带物品的步骤,包括:
17.在检测到用户的出门准备动作时,获取用户所在位置的环境信息;
18.根据所述环境信息确定所述用户的待携带物品。
19.可选地,所述根据所述环境信息确定所述用户的待携带物品的步骤,包括:
20.根据所述环境信息确定初始环境关联物品;
21.获取所述用户的用户信息,根据所述用户信息对所述初始环境关联物品进行筛选,获得所述用户的待携带物品。
22.可选地,所述在检测到用户的出门准备动作时,确定所述用户的待携带物品的步骤,包括:
23.在检测到用户的出门准备动作时,采集所述用户的用户图像,并根据所述用户图像确定设定携带物品;
24.获取所述用户所在位置的环境信息,并根据所述环境信息确定环境关联物品;
25.根据所述设定携带物品和所述环境关联物品确定所述用户的待携带物品。
26.可选地,所述检测所述用户的已携带物品的步骤,包括:
27.采集所述用户的用户图像,并对所述用户图像进行图像提取,获得物品图像;
28.根据所述物品图像确定所述用户的已携带物品。
29.可选地,所述检测所述用户的已携带物品的步骤,包括:
30.采集用户所在区域的传感器信息;
31.从所述传感器信息中提取物品信息,并根据所述物品信息确定所述用户的已携带物品。
32.可选地,所述从所述传感器信息中提取物品信息,并根据所述物品信息确定所述用户的已携带物品的步骤,包括:
33.从所述传感器信息中提取物品信息和物品距离,并判断物品距离是否小于预设距离阈值;
34.在所述物品距离小于预设距离阈值时,根据所述物品信息所述用户的已携带物品。
35.可选地,所述检测所述用户的已携带物品的步骤,包括:
36.采集所述用户的用户图像和用户所在区域的传感器信息,并根据所述用户图像确定第一携带物品;
37.从所述传感器信息中提取物品信息,并根据所述物品信息确定第二携带物品;
38.根据所述第一携带物品和所述第二携带物品确定所述用户的已携带物品。
39.可选地,所述在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息的步骤之前,所述物品携带提醒方法还包括:
40.检测所述用户的开门动作和运动轨迹,并根据所述开门动作和所述运动轨迹判断所述用户是否存在出门意图;
41.在所述用户存在出门意图时,采集门外预设区域的区域视频,并基于所述区域视频判断是否检测到所述用户的出门动作。
42.可选地,所述在所述用户存在出门意图时,采集门外预设区域的区域视频,并基于所述区域视频判断是否检测到所述用户的出门动作的步骤,包括:
43.在所述用户存在出门意图时,获取门外预设区域的检测信息;
44.根据所述检测信息判断所述门外预设区域内是否存在人体图像;
45.在所述门外预设区域内存在人体图像时,采集所述门外预设区域的区域视频;
46.基于所述区域视频判断是否检测到所述用户的出门动作。
47.可选地,所述基于所述区域视频判断是否检测到所述用户的出门动作的步骤,包括:
48.对所述区域视频进行图像识别,获得图像识别结果;
49.基于所述图像识别结果判断是否检测到所述用户的出门动作。
50.此外,为实现上述目的,本发明还提出一种物品携带提醒装置,所述物品携带提醒装置包括:物品确定模块、物品检测模块和携带提醒模块;
51.所述物品确定模块,用于在检测到用户的出门准备动作时,确定所述用户的待携带物品;
52.所述物品检测模块,用于检测所述用户的已携带物品,并根据所述待携带物品和所述已携带物品确定所述用户的未携带物品;
53.所述携带提醒模块,用于在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息。
54.可选地,所述物品确定模块,还用于在检测到用户的出门准备动作时,采集所述用户的用户图像;
55.所述物品确定模块,还用于根据所述用户图像确定所述用户的待携带物品。
56.可选地,所述物品确定模块,还用于对所述用户图像进行图像识别,获得用户人脸图像,并查找所述用户人脸图像对应的用户设定携带物品;
57.所述物品确定模块,还用于查找所述用户设定携带物品的提醒时间区间;
58.所述物品确定模块,还用于获取当前时间,并根据所述当前时间和所述提醒时间区间对所述用户设定携带物品进行筛选,获得所述用户的待携带物品。
59.可选地,所述物品确定模块,还用于在检测到用户的出门准备动作时,获取用户所在位置的环境信息;
60.所述物品确定模块,还用于根据所述环境信息确定所述用户的待携带物品。
61.可选地,所述物品确定模块,还用于根据所述环境信息确定初始环境关联物品;
62.所述物品确定模块,还用于获取所述用户的用户信息,根据所述用户信息对所述初始环境关联物品进行筛选,获得所述用户的待携带物品。
63.此外,为实现上述目的,本发明还提出一种物品携带提醒设备,所述物品携带提醒设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的物品携带提醒程序,所述物品携带提醒程序配置为实现如上文所述的物品携带提醒方法。
64.此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有物品携带提醒程序,所述物品携带提醒程序被处理器执行时实现如上文所述的物品携带提醒方法。
65.本发明中,公开了在检测到用户的出门准备动作时,确定用户的待携带物品,检测用户的已携带物品,并根据待携带物品和已携带物品确定用户的未携带物品,在检测到用户的出门动作时,基于未携带物品生成提醒信息;由于本发明在用户进行出门准备时,预先确定用户的未携带物品,在用户真正出门时,基于未携带物品提醒用户,从而能够在用户出门时提醒用户携带物品,避免了用户出现遗忘,提高了用户体验。
附图说明
66.图1是本发明实施例方案涉及的硬件运行环境的物品携带提醒设备的结构示意图;
67.图2为本发明物品携带提醒方法第一实施例的流程示意图;
68.图3为本发明物品携带提醒方法第二实施例的流程示意图;
69.图4为本发明物品携带提醒方法第三实施例的流程示意图;
70.图5为本发明物品携带提醒方法第四实施例的流程示意图;
71.图6为本发明物品携带提醒方法第五实施例的流程示意图;
72.图7为本发明物品携带提醒方法第六实施例的流程示意图;
73.图8为本发明物品携带提醒方法第七实施例的流程示意图;
74.图9为本发明物品携带提醒方法第八实施例的流程示意图;
75.图10为本发明物品携带提醒装置第一实施例的结构框图。
76.本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
77.应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
78.参照图1,图1为本发明实施例方案涉及的硬件运行环境的物品携带提醒设备结构示意图。
79.如图1所示,该物品携带提醒设备可以包括:处理器1001,例如中央处理器(central processing unit,cpu),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(display),可选用户接口1003还可以包括标准的有线接口、无线接口,对于用户接口1003的有线接口在本发明中可为usb接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(wireless-fidelity,wi-fi)接口)。存储器1005可以是高速的随机存取存储器(random access memory,ram)存储器,也可以是稳定的存储器(non-volatile memory,nvm),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
80.本领域技术人员可以理解,图1中示出的结构并不构成对物品携带提醒设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
81.如图1所示,认定为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及物品携带提醒程序。
82.在图1所示的物品携带提醒设备中,网络接口1004主要用于连接后台服务器,与所述后台服务器进行数据通信;用户接口1003主要用于连接用户设备;所述物品携带提醒设备通过处理器1001调用存储器1005中存储的物品携带提醒程序,并执行本发明实施例提供的物品携带提醒方法。
83.基于上述硬件结构,提出本发明物品携带提醒方法的实施例。
84.参照图2,图2为本发明物品携带提醒方法第一实施例的流程示意图,提出本发明物品携带提醒方法第一实施例。
85.在第一实施例中,所述物品携带提醒方法包括以下步骤:
86.步骤s10:在检测到用户的出门准备动作时,确定所述用户的待携带物品。
87.应当理解的是,本实施例方法的执行主体可以是具有数据处理、网络通信以及程序运行功能的终端设备,例如智能家居设备,其中,智能家居设备可以是智能门等,或者是其他能够实现相同或相似功能的电子设备,本实施例对此不加以限制。在本实施例和其他实施例中,以智能门为例进行说明。
88.需要说明的是,出门准备动作可以预先设置。例如,将用户由远到近靠近智能家居设备设置为出门准备动作。
89.可以理解的是,为了能够实时检测用户的出门准备动作,可以间隔预设时间周期检测用户的出门准备动作。其中,预设时间周期可以预先设置,例如,将1s预先设置为预设时间周期。
90.应当理解的是,检测用户的出门准备动作可以是通过图像、超声波以及红外线中的至少一种方式检测用户的出门准备动作。在本实施例和其他实施例中,以通过图像检测用户的出门准备动作为例进行说明。
91.在具体实现中,例如,智能门通过摄像头采集门内预设区域的当前检测图像,并将当前检测图像与前次检测图像进行比较,以判断是否检测到用户由远到近靠近智能门,在检测到用户由远到近靠近智能门时,判定检测到用户的出门准备动作。其中,前次检测图像可以是前一检测周期检测获得的检测图像。
92.需要说明的是,待携带物品可以是用户出门时需要携带的物品,可以由用户预先设置。
93.在具体实现中,例如,用户可以通过智能门的操作界面输入出门时的待携带物品。
94.可以理解的是,确定用户的待携带物品可以是在预设存储区域读取用户的待携带物品。其中,预设存储区域用于存储用户信息。
95.步骤s20:检测所述用户的已携带物品,并根据所述待携带物品和所述已携带物品确定所述用户的未携带物品。
96.需要说明的是,已携带物品可以是用户出门时已经携带的物品。
97.应当理解的是,检测用户的已携带物品可以是采集用户的用户图像,并对用户图像进行图像提取,获得物品图像,根据物品图像确定用户的已携带物品;
98.也可以是采集用户所在区域的传感器信息,从传感器信息中提取物品信息,并根据物品信息确定用户的已携带物品,本实施例对此不加以限制。
99.可以理解的是,根据待携带物品和已携带物品确定用户的未携带物品可以是将待携带物品与已携带物品进行逐一比较,以确定用户的未携带物品。
100.步骤s30:在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息。
101.需要说明的是,出门动作可以由用户或物品携带提醒设备的管理人员预先设置。例如,可以将用户由内到外开门,且跨步出门的动作预先设置为出门动作。
102.应当理解的是,可以通过图像、超声波以及红外线中的至少一种方式检测用户的出门动作。在本实施例和其他实施例中,通过图像检测用户的出门动作。
103.在具体实现中,例如,智能门通过摄像头采集门内预设区域的当前检测图像,并将当前检测图像与前次检测图像进行比较,以判断是否检测到用户由内到外开门,且跨步出门,在检测到用户由内到外开门,且跨步出门时,判定检测到用户的出门动作。其中,前次检
测图像可以是前一检测周期检测获得的检测图像。
104.可以理解的是,基于未携带物品生成提醒信息可以是在预设提醒表中查找未携带物品对应的提醒信息。预设提醒表中包含未携带物品与提醒信息的对应关系,未携带物品与提醒信息的对应关系可以由用户预先设置。
105.在具体实现中,例如,在未携带物品为雨伞时,对应的提醒信息为“主人,您忘记带雨伞了”。
106.第一实施例中,公开了在检测到用户的出门准备动作时,确定用户的待携带物品,检测用户的已携带物品,并根据待携带物品和已携带物品确定用户的未携带物品,在检测到用户的出门动作时,基于未携带物品生成提醒信息;由于本实施例在用户进行出门准备时,预先确定用户的未携带物品,在用户真正出门时,基于未携带物品提醒用户,从而能够在用户出门时提醒用户携带物品,避免了用户出现遗忘,提高了用户体验。
107.参照图3,图3为本发明物品携带提醒方法第二实施例的流程示意图,基于上述图2所示的第一实施例,提出本发明物品携带提醒方法的第二实施例。
108.在第二实施例中,所述步骤s10,包括:
109.步骤s101:在检测到用户的出门准备动作时,采集所述用户的用户图像。
110.应当理解的是,在实际应用中,物品携带提醒设备可能多个用户使用,不同用户的待携带物品可能完成不同。如果直接将其中一个用户设置的待携带物品作为所有用户的待携带用品,可能导致待携带用品完全不符合用户的实际使用需求。为了克服上述缺陷,本实施例中,在检测到用户的出门准备动作时,采集用户的用户图像,并根据用户图像确定用户身份,并基于用户身份确定用户的待携带物品。
111.可以理解的是,采集用户的用户图像可以是通过图像采集设备采集用户的用户图像。其中,图像采集设备可以预先设置在物品携带提醒设备上。
112.在具体实现中,例如,可以在智能门内预先设置摄像头,通过摄像头采集用户的用户图像。
113.步骤s102:根据所述用户图像确定所述用户的待携带物品。
114.应当理解的是,根据用户图像确定用户的待携带物品可以是对用户图像进行图像识别,获取用户人脸图像,在预设物品表单中查找用户人脸图像对应的待携带物品。其中,用户人脸图像用于表示用户身份,预设物品表单中包含用户人脸图像与待携带物品的对应关系。
115.可以理解的是,对用户图像进行图像识别,获得用户人脸图像可以是通过预设人脸识别模型对用户图像进行图像识别,获得用户人脸图像。其中,预设人脸识别模型用于对图像进行识别,以获得用户人脸图像。
116.在具体实现中,例如,用户可以先通过智能门的操作界面输入出门时的待携带物品,并录入用户人脸图像,智能门在接收到待携带物品和用户人脸图像后,可以建立用户人脸图像与待携带物品的对应关系,并存储在预设物品表单中。
117.进一步地,为了能够在确定待携带物品时,引入时间因素,限定提醒的时间范围,所述步骤s102,包括:
118.对所述用户图像进行图像识别,获得用户人脸图像,并查找所述用户人脸图像对应的用户设定携带物品;
119.查找所述用户设定携带物品的提醒时间区间;
120.获取当前时间,并根据所述当前时间和所述提醒时间区间对所述用户设定携带物品进行筛选,获得所述用户的待携带物品。
121.需要说明的是,用户人脸图像可以用于表示用户身份。用户设定携带物品可以是用户预先设定的出门时需要携带的物品。
122.应当理解的是,对用户图像进行图像识别,获得用户人脸图像可以是通过预设人脸识别模型对用户图像进行图像识别,获得用户人脸图像。其中,预设人脸识别模型用于对图像进行识别,以获得用户人脸图像。
123.可以理解的是,查找所述用户人脸图像对应的用户设定携带物品可以是在预设物品表单中查找用户人脸图像对应的用户设定携带物品。其中,预设物品表单中包含用户人脸图像与用户设定携带物品的对应关系,用户人脸图像与用户设定携带物品的对应关系可以由用户预先设置。
124.需要说明的是,用户除了可以设定出门时需要携带的物品,还可以设定该物品的提醒时间区间。例如,用户可以预先设置出门时需要携带地铁卡,在上午8:00-12:00进行提醒。
125.可以理解的是,查找用户设定携带物品的提醒时间区间可以是在预设提醒时间表中查找用户设定携带物品对应的提醒时间区间。其中,预设提醒时间表中包含用户设定携带物品与提醒时间区间的对应关系,用户设定携带物品与提醒时间区间的对应关系可以由用户预先设置。
126.应当理解的是,根据当前时间和提醒时间区间对用户设定携带物品进行筛选,获得用户的待携带物品可以是判断提醒时间区间是否包含当前时间,将包含当前时间的提醒时间区间对应的用户设定携带物品作为待携带物品。
127.在具体实现中,例如,用户可以预先通过智能门的操作界面输入出门的用户设定携带物品为地铁卡和购物袋,地铁卡在8:00-12:00没有带时进行提醒,购物袋在16:00-18:00没有带时进行提醒,并录入用户人脸图像,智能门在采集到用户图像后,获取当前时间为9:00,智能门对用户图像进行人脸识别后,确定用户设定携带物品为地铁卡和购物袋,当前时间处于地铁卡对应的提醒时间区间中,不处于购物袋对应的提醒时间区间中,因此,可以确定待携带物品为地铁卡。
128.在第二实施例中,公开了在检测到用户的出门准备动作时,采集用户的用户图像,根据用户图像确定所述用户的待携带物品;由于本实施例中基于采集到的用户图像确定用户对应的待携带物品,从而能够识别用户身份,并根据用户身份的不同确定不同的待携带物品,以满足用户实际的物品携带需求。
129.参照图4,图4为本发明物品携带提醒方法第三实施例的流程示意图,基于上述图2所示的第一实施例,提出本发明物品携带提醒方法的第三实施例。
130.在第三实施例中,所述步骤s10,包括:
131.步骤s101':在检测到用户的出门准备动作时,获取用户所在位置的环境信息。
132.应当理解的是,在实际使用中,还存在室外下雨或空气污染较重的情况。为了能够在处于上述情况时,提醒用户携带对应的物品出门,本实施例中,根据用户所在位置的环境信息确定用户的待携带物品。
133.需要说明的是,环境信息可以是温度信息、天气信息、空气污染信息以及空气湿度信息中的至少一个。
134.可以理解的是,获取用户所在位置的环境信息可以是从互联网上获取用户所在位置的环境信息;也可以是在物品携带提醒设备安装传感器,通过传感器获取用户所在位置的环境信息。其中,传感器可以是温度传感器、污染检测传感器以及湿度传感器等。
135.步骤s102':根据所述环境信息确定所述用户的待携带物品。
136.可以理解的是,根据环境信息确定待携带物品可以是在预设环境关联表中查找环境信息对应的待携带物品。其中,预设环境关联表中包含环境信息与待携带物品的对应关系,环境信息与待携带物品的对应关系可以预先设置。例如,下雨对应的待携带物品为雨伞。
137.在具体实现中,例如,在环境信息为正在下雨或未来一小时内有雨时,可以将雨伞作为待携带物品,以便提醒用户携带雨伞出门。
138.进一步地,不同的用户在不同的环境下,需要的物品不同。例如,在下雨时,有些用户喜欢打伞,有些用户喜欢穿雨衣。因此,为了考虑用户的实际需求。所述步骤s102',包括:
139.根据所述环境信息确定初始环境关联物品;
140.获取所述用户的用户信息,根据所述用户信息对所述初始环境关联物品进行筛选,获得所述用户的待携带物品。
141.应当理解的是,根据环境信息确定初始环境关联物品可以是在预设环境关联表中查找环境信息对应的初始环境关联物品。其中,预设环境关联表中包含环境信息与初始环境关联物品的对应关系,环境信息与初始环境关联物品的对应关系可以预先设置。例如,下雨对应的初始环境关联物品为雨伞和雨衣。
142.需要说明的是,用户信息可以是用户id等能够标识用户身份的信息。
143.可以理解的是,根据用户信息对初始环境关联物品进行筛选,获得待携带物品可以是根据用户信息确定用户身份,并基于用户身份生成各初始环境关联物品的参考分值,基于参考分值对初始环境关联物品进行筛选,获得待携带物品。
144.在第三实施例中,公开了在检测到用户的出门准备动作时,获取用户所在位置的环境信息,根据环境信息确定所述用户的待携带物品;由于本实施例中,根据用户所在位置的环境信息确定用户的待携带物品,从而能够根据环境的不同自动设置不同的待携带物品,以满足用户在不同环境下的物品需求。
145.参照图5,图5为本发明物品携带提醒方法第四实施例的流程示意图,基于上述图2所示的第一实施例,提出本发明物品携带提醒方法的第四实施例。
146.在第四实施例中,所述步骤s10,包括:
147.步骤s101":在检测到用户的出门准备动作时,采集所述用户的用户图像,并根据所述用户图像确定设定携带物品。
148.应当理解的是,为了进一步提高用户体验,满足用户实际需求,本实施例中,公开了通过用户图像和环境信息相结合方式来确定设定携带物品。
149.可以理解的是,采集用户的用户图像可以是通过图像采集设备采集用户的用户图像。其中,图像采集设备可以预先设置在物品携带提醒设备上。
150.在具体实现中,例如,可以在智能门内预先设置摄像头,通过摄像头采集用户的用
户图像。
151.应当理解的是,根据用户图像确定用户的设定携带物品可以是对用户图像进行图像识别,获取用户人脸图像,在预设物品表单中查找用户人脸图像对应的设定携带物品。其中,用户人脸图像用于表示用户身份,预设物品表单中包含用户人脸图像与设定携带物品的对应关系。
152.可以理解的是,对用户图像进行图像识别,获得用户人脸图像可以是通过预设人脸识别模型对用户图像进行图像识别,获得用户人脸图像。其中,预设人脸识别模型用于对图像进行识别,以获得用户人脸图像。
153.在具体实现中,例如,用户可以先通过智能门的操作界面输入出门时的设定携带物品,并录入用户人脸图像,智能门在接收到设定携带物品和用户人脸图像后,可以建立用户人脸图像与设定携带物品的对应关系,并存储在预设物品表单中。
154.步骤s102":获取所述用户所在位置的环境信息,并根据所述环境信息确定环境关联物品。
155.应当理解的是,只靠用户预先设定出门需要携带的物品,可能存在用户考虑不全的情况。因此,本实施例中还可以由物品携带提醒设备自动获取环境信息,并根据环境信息确定用户出门时还需要携带的环境关联物品。
156.需要说明的是,环境信息可以是温度信息、天气信息、空气污染信息以及空气湿度信息中的至少一个。
157.可以理解的是,获取用户所在位置的环境信息可以是从互联网上获取用户所在位置的环境信息;也可以是在物品携带提醒设备安装传感器,通过传感器获取用户所在位置的环境信息。其中,传感器可以是温度传感器、污染检测传感器以及湿度传感器等。
158.应当理解的是,根据环境信息确定环境关联物品可以是在预设环境关联表中查找环境信息对应的环境关联物品。其中,预设环境关联表中包含环境信息与环境关联物品的对应关系,环境信息与环境关联物品的对应关系可以预先设置。例如,下雨对应的环境关联物品为雨伞。
159.在具体实现中,例如,在环境信息为正在下雨或未来一小时内有雨时,可以将雨伞作为环境关联物品,以便提醒用户携带雨伞出门。
160.步骤s103":根据所述设定携带物品和所述环境关联物品确定所述用户的待携带物品。
161.应当理解的是,根据设定携带物品和环境关联物品确定用户的待携带物品可以是将设定携带物品和环境关联物品作为用户的待携带物品。
162.在第四实施例中,公开了在检测到用户的出门准备动作时,采集用户的用户图像,并根据用户图像确定设定携带物品,获取用户所在区域的环境信息,并根据环境信息确定环境关联物品,根据设定携带物品和环境关联物品确定用户的待携带物品;由于本实施例中将用户的设定携带物品作为待携带物品,还将环境关联物品作为待携带物品,从而能够在用户设定待携带物品的基础上,自动依据环境的变化,增加待携带物品,以满足用户的实际需求。
163.参照图6,图6为本发明物品携带提醒方法第五实施例的流程示意图,基于上述图2所示的第一实施例,提出本发明物品携带提醒方法的第五实施例。
164.在第五实施例中,所述步骤s20,包括:
165.步骤s201:采集所述用户的用户图像,并对所述用户图像进行图像提取,获得物品图像。
166.应当理解的是,在实际应用中,用户可能将已携带物品拿在手上或戴在身上。例如,用户可能将雨伞拿在手上或将口罩戴在嘴上。为了准确识别拿在手上或戴在身上的待携带物品,本实例中通过用户图像确定用户的已携带物品。
167.可以理解的是,采集用户的用户图像可以是通过图像采集设备采集用户的用户图像。其中,图像采集设备可以预先设置在物品携带提醒设备上。
168.在具体实现中,例如,可以在智能门内预先设置摄像头,通过摄像头采集用户的用户图像。
169.步骤s202:根据所述物品图像确定所述用户的已携带物品。
170.可以理解的是,根据物品图像确定所述用户的已携带物品可以是通过预设图像识别模型对物品图像进行识别,根据识别结果确定用户的已携带物品。其中,预设图像识别模型用于识别物品的类型。
171.在第五实施例中,公开了采集用户的用户图像,并对用户图像进行图像提取,获得物品图像,根据物品图像确定用户的已携带物品;由于本实例中根据采集到的物品图像确定用户的已携带物品,从而能够快速识别用户的已携带物品。
172.参照图7,图7为本发明物品携带提醒方法第六实施例的流程示意图,基于上述图2所示的第一实施例,提出本发明物品携带提醒方法的第六实施例。
173.在第六实施例中,所述步骤s20,包括:
174.步骤s201':采集用户所在区域的传感器信息。
175.应当理解的是,在实际应用中,用户可能将已携带物品放在口袋或书包中。例如,用户可能将车钥匙和手机放在暴力。为了准确识别放在口袋或书包中的待携带物品,本实例中通过传感器信息确定用户的已携带物品。
176.需要说明的是,传感器信息可以是通过超声波和/或红外线检测获得的信息。
177.在具体实现中,例如,在智能门内预先设置红外设备,通过红外设备采集用户所在区域的传感器信息。
178.步骤s202':从所述传感器信息中提取物品信息,并根据所述物品信息确定所述用户的已携带物品。
179.从传感器信息中提取物品信息,根据物品信息确定用户的已携带物品可以是根据信息标识对传感器信息进行提取,获得物品信息,根据物品信息确定用户的已携带物品。其中,信息标识用于表示信息的内容,物品信息可以是物品形状和物品位置等信息。
180.进一步地,在实际应用中,如果通过传感器检测到物品,就认为该物品为已携带物品,可能会造成误判。为克服上述缺陷,所述步骤s202',包括:
181.从所述传感器信息中提取物品信息和物品距离,并判断物品距离是否小于预设距离阈值;
182.在所述物品距离小于预设距离阈值时,根据所述物品信息所述用户的已携带物品。
183.需要说明的是,物品距离可以是检测到的物品与物品携带提醒设备之间的距离。
184.预设距离阈值可以由用户预先设置。例如,用户可以将预设距离阈值设置为50cm。
185.应当理解的是,在物品距离小于预设距离阈值时,说明检测到的物品与物品携带提醒设备之间较近,用户可能携带该物品出门。因此,可以将检测到的物品作为用户的已携带物品。
186.在第六实施例中,公开了采集用户所在区域的传感器信息,从传感器信息中提取物品信息,并根据物品信息确定用户的已携带物品;由于本实施例中基于传感器信息来确定用户的已携带物品,从而不仅能够检测拿在手上或戴在身上的物品,还能检测放在口袋或书包中的物品,进而提高了已携带物品检测的准确性。
187.参照图8,图8为本发明物品携带提醒方法第七实施例的流程示意图,基于上述图2所示的第一实施例,提出本发明物品携带提醒方法的第七实施例。
188.在第七实施例中,所述步骤s20,包括:
189.步骤s201":采集所述用户的用户图像和用户所在区域的传感器信息,并根据所述用户图像确定第一携带物品。
190.应当理解的是,在实际使用中,某些物品可能传感器识别不准确。因此,为了进一步提高已携带物品检测的准确性,本实施例中通过图像检测和传感器检测相结合的方式来确定用户的已携带物品。
191.可以理解的是,采集用户的用户图像可以是通过图像采集设备采集用户的用户图像。其中,图像采集设备可以预先设置在物品携带提醒设备上。
192.在具体实现中,例如,可以在智能门内预先设置摄像头,通过摄像头采集用户的用户图像。
193.需要说明的是,传感器信息可以是通过超声波和/或红外线检测获得的信息。
194.在具体实现中,例如,在智能门内预先设置红外设备,通过红外设备采集用户所在区域的传感器信息。
195.需要说明的是,第一携带物品可以是根据用户图像确定的用户已携带物品。
196.应当理解的是,根据用户图像确定第一携带物品可以是对用户图像进行图像提取,获得物品图像,通过预设图像识别模型对物品图像进行识别,根据识别结果确定第一携带物品。其中,预设图像识别模型用于识别物品的类型。
197.步骤s202":从所述传感器信息中提取物品信息,并根据所述物品信息确定第二携带物品。
198.需要说明的是,物品信息可以是物品形状和物品位置等信息。第二携带物品可以是根据传感器信息确定的用户已携带物品。
199.可以理解的是,从传感器信息中提取物品信息,根据物品信息确定第二携带物品可以是根据信息标识对传感器信息进行提取,获得物品信息,根据物品信息确定第二携带物品。其中,信息标识用于表示信息的内容。
200.步骤s203":根据所述第一携带物品和所述第二携带物品确定所述用户的已携带物品。
201.应当理解的是,根据第一携带物品和第二携带物品确定用户的已携带物品可以是将第一携带物品和第二携带物品作为用户的已携带物品。
202.在第七实施例中,公开了采集用户的用户图像和用户所在区域的传感器信息,并
根据用户图像确定第一携带物品,从传感器信息中提取物品信息,并根据物品信息确定第二携带物品,根据第一携带物品和第二携带物品确定用户的已携带物品;由于本实施例中通过图像检测和传感器检测相结合的方式来确定用户的已携带物品,从而能够进一步提高已携带物品检测的准确性。
203.参照图9,图9为本发明物品携带提醒方法第八实施例的流程示意图,基于上述图2所示的第一实施例,提出本发明物品携带提醒方法的第八实施例。
204.在第八实施例中,所述步骤s30之前,还包括:
205.步骤s210:检测所述用户的开门动作和运动轨迹,并根据所述开门动作和所述运动轨迹判断所述用户是否存在出门意图。
206.可以理解的是,根据开门动作和运动轨迹判断所述用户是否存在出门意图可以是将开门动作与预设第一动作进行匹配,获得动作匹配结果,将运动轨迹与预设轨迹进行匹配,获得轨迹匹配结果,根据动作匹配结果和轨迹匹配结果判断用户是否存在出门意图。其中,预设第一动作和预设轨迹都可以预先设置,例如,将由内到外开门设置为预设第一动作,将跨步出门设置为预设轨迹。
207.应当理解的是,在动作匹配结果为匹配成功,且轨迹匹配结果为匹配成功时,判定用户存在出门意图。
208.在具体实现中,例如,用户由内到外开门,且跨步出门时,判定用户存在出门意图。
209.步骤s220:在所述用户存在出门意图时,采集门外预设区域的区域视频,并基于所述区域视频判断是否检测到所述用户的出门动作。
210.应当理解的是,在实际应用中,可能存在用户开门是为了取外卖或给客人开门的情况。此时,用户存在出门意图,并未真正出门。因此,在用户存在出门意图时,还需要判断用户是否真正出门。
211.需要说明的是,门外预设区域可以预先设置。例如,将智能门的门口区域设置为门外预设区域。
212.可以理解的是,采集门外预设区域的区域视频可以是通过图像采集设备采集门外预设区域的区域视频。其中,图像采集设备可以预先设置在物品携带提醒设备上。
213.在具体实现中,例如,可以在智能门内预先设置摄像头,通过摄像头采集门外预设区域的区域视频。
214.应当理解的是,基于区域视频判断是否检测到所述用户的出门动作可以是对区域视频进行逐帧提取,获得区域图像集,并将区域图像集中的区域图像进行逐一对比,以确定用户的当前动作,并将当前动作与预设第二动作进行匹配,根据匹配结果判断是否检测到用户的出门动作。其中,预设第二动作可以是用户远离图像采集设备或用户下楼。
215.进一步地,在实际应用中,如果一直采集门外预设区域的区域视频会导致能耗较高。为了克服上述缺陷,所述步骤s220,包括:
216.在所述用户存在出门意图时,获取门外预设区域的检测信息;
217.根据所述检测信息判断所述门外预设区域内是否存在人体图像;
218.在所述门外预设区域内存在人体图像时,采集所述门外预设区域的区域视频;
219.基于所述区域视频判断是否检测到所述用户的出门动作。
220.需要说明的是,检测信息可以是超声波和/或红外线信息,本实施例对此不加以限
制。
221.应当理解的是,获取门外预设区域的检测信息可以是通过传感器设备获取门外预设区域的检测信息。其中,传感器设备可以是红外线传感器和/或超声波传感器。
222.进一步地,为了提高出门动作检测的准确性和检测速度,所述基于所述区域视频判断是否检测到所述用户的出门动作,包括:
223.对所述区域视频进行图像识别,获得图像识别结果;
224.基于所述图像识别结果判断是否检测到所述用户的出门动作。
225.应当理解的是,对区域视频进行图像识别,获得图像识别结果可以是通过预设图像识别模型对区域视频进行图像识别,获得图像识别结果。其中,预设图像识别模型可以用于识别图像中的人体动作。
226.可以理解的是,图像识别结果中包含识别到的人体动作,将识别到的人体动作与预设第二动作进行匹配,根据匹配结果判断是否检测到用户的出门动作。其中,预设第二动作可以是用户远离图像采集设备或用户下楼。
227.在第八实施例中,公开了检测用户的开门动作和运动轨迹,并根据开门动作和运动轨迹判断用户是否存在出门意图,在用户存在出门意图时,采集门外预设区域的区域视频,并基于区域视频判断是否检测到用户的出门动作;由于本实施例先在用户存在出门意图时,再基于门外预设区域的区域视频进一步检测用户的出门动作,从而能够检测用户是否真正出门,避免出现误判。
228.此外,本发明实施例还提出一种存储介质,所述存储介质上存储有物品携带提醒程序,所述物品携带提醒程序被处理器执行时实现如上文所述的物品携带提醒方法。
229.此外,参照图10,本发明实施例还提出一种物品携带提醒装置,所述物品携带提醒装置包括:物品确定模块10、物品检测模块20和携带提醒模块30;
230.所述物品确定模块10,用于在检测到用户的出门准备动作时,确定所述用户的待携带物品。
231.所述物品检测模块20,用于检测所述用户的已携带物品,并根据所述待携带物品和所述已携带物品确定所述用户的未携带物品。
232.所述携带提醒模块30,用于在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息。
233.本实施例中,公开了在检测到用户的出门准备动作时,确定用户的待携带物品,检测用户的已携带物品,并根据待携带物品和已携带物品确定用户的未携带物品,在检测到用户的出门动作时,基于未携带物品生成提醒信息;由于本实施例在用户进行出门准备时,预先确定用户的未携带物品,在用户真正出门时,基于未携带物品提醒用户,从而能够在用户出门时提醒用户携带物品,避免了用户出现遗忘,提高了用户体验。
234.本发明所述物品携带提醒装置的其他实施例或具体实现方式可参照上述各方法实施例,此处不再赘述。
235.需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括该
要素的过程、方法、物品或者系统中还存在另外的相同要素。
236.上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。词语第一、第二、以及第三等的使用不表示任何顺序,可将这些词语解释为名称。
237.通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器镜像(read only memory image,rom)/随机存取存储器(random access memory,ram)、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
238.以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
239.本发明公开了a1、一种物品携带提醒方法,所述物品携带提醒方法包括以下步骤:
240.在检测到用户的出门准备动作时,确定所述用户的待携带物品;
241.检测所述用户的已携带物品,并根据所述待携带物品和所述已携带物品确定所述用户的未携带物品;
242.在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息。
243.a2、如a1所述的物品携带提醒方法,所述在检测到用户的出门准备动作时,确定所述用户的待携带物品的步骤,包括:
244.在检测到用户的出门准备动作时,采集所述用户的用户图像;
245.根据所述用户图像确定所述用户的待携带物品。
246.a3、如a2所述的物品携带提醒方法,所述根据所述用户图像确定所述用户的待携带物品的步骤,包括:
247.对所述用户图像进行图像识别,获得用户人脸图像,并查找所述用户人脸图像对应的用户设定携带物品;
248.查找所述用户设定携带物品的提醒时间区间;
249.获取当前时间,并根据所述当前时间和所述提醒时间区间对所述用户设定携带物品进行筛选,获得所述用户的待携带物品。
250.a4、如a1所述的物品携带提醒方法,所述在检测到用户的出门准备动作时,确定所述用户的待携带物品的步骤,包括:
251.在检测到用户的出门准备动作时,获取用户所在位置的环境信息;
252.根据所述环境信息确定所述用户的待携带物品。
253.a5、如a4所述的物品携带提醒方法,所述根据所述环境信息确定所述用户的待携带物品的步骤,包括:
254.根据所述环境信息确定初始环境关联物品;
255.获取所述用户的用户信息,根据所述用户信息对所述初始环境关联物品进行筛选,获得所述用户的待携带物品。
256.a6、如a1所述的物品携带提醒方法,所述在检测到用户的出门准备动作时,确定所述用户的待携带物品的步骤,包括:
257.在检测到用户的出门准备动作时,采集所述用户的用户图像,并根据所述用户图像确定设定携带物品;
258.获取所述用户所在区域的环境信息,并根据所述环境信息确定环境关联物品;
259.根据所述设定携带物品和所述环境关联物品确定所述用户的待携带物品。
260.a7、如a1-a6中任一项所述的物品携带提醒方法,所述检测所述用户的已携带物品的步骤,包括:
261.采集所述用户的用户图像,并对所述用户图像进行图像提取,获得物品图像;
262.根据所述物品图像确定所述用户的已携带物品。
263.a8、如a1-a6中任一项所述的物品携带提醒方法,所述检测所述用户的已携带物品的步骤,包括:
264.采集用户所在区域的传感器信息;
265.从所述传感器信息中提取物品信息,并根据所述物品信息确定所述用户的已携带物品。
266.a9、如a8所述的物品携带提醒方法,所述从所述传感器信息中提取物品信息,并根据所述物品信息确定所述用户的已携带物品的步骤,包括:
267.从所述传感器信息中提取物品信息和物品距离,并判断物品距离是否小于预设距离阈值;
268.在所述物品距离小于预设距离阈值时,根据所述物品信息所述用户的已携带物品。
269.a10、如a1-a6中任一项所述的物品携带提醒方法,所述检测所述用户的已携带物品的步骤,包括:
270.采集所述用户的用户图像和用户所在区域的传感器信息,并根据所述用户图像确定第一携带物品;
271.从所述传感器信息中提取物品信息,并根据所述物品信息确定第二携带物品;
272.根据所述第一携带物品和所述第二携带物品确定所述用户的已携带物品。
273.a11、如a1-a6中任一项所述的物品携带提醒方法,所述在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息的步骤之前,所述物品携带提醒方法还包括:
274.检测所述用户的开门动作和运动轨迹,并根据所述开门动作和所述运动轨迹判断所述用户是否存在出门意图;
275.在所述用户存在出门意图时,采集门外预设区域的区域视频,并基于所述区域视频判断是否检测到所述用户的出门动作。
276.a12、如a11所述的物品携带提醒方法,所述在所述用户存在出门意图时,采集门外预设区域的区域视频,并基于所述区域视频判断是否检测到所述用户的出门动作的步骤,包括:
277.在所述用户存在出门意图时,获取门外预设区域的检测信息;
278.根据所述检测信息判断所述门外预设区域内是否存在人体图像;
279.在所述门外预设区域内存在人体图像时,采集所述门外预设区域的区域视频;
280.基于所述区域视频判断是否检测到所述用户的出门动作。
281.a13、如a12所述的物品携带提醒方法,所述基于所述区域视频判断是否检测到所述用户的出门动作的步骤,包括:
282.对所述区域视频进行图像识别,获得图像识别结果;
283.基于所述图像识别结果判断是否检测到所述用户的出门动作。
284.本发明还公开了b14、一种物品携带提醒装置,所述物品携带提醒装置包括:物品确定模块、物品检测模块和携带提醒模块;
285.所述物品确定模块,用于在检测到用户的出门准备动作时,确定所述用户的待携带物品;
286.所述物品检测模块,用于检测所述用户的已携带物品,并根据所述待携带物品和所述已携带物品确定所述用户的未携带物品;
287.所述携带提醒模块,用于在检测到所述用户的出门动作时,基于所述未携带物品生成提醒信息。
288.b15、如b14所述的物品携带提醒装置,所述物品确定模块,还用于在检测到用户的出门准备动作时,采集所述用户的用户图像;
289.所述物品确定模块,还用于根据所述用户图像确定所述用户的待携带物品。
290.b16、如b15所述的物品携带提醒装置,所述物品确定模块,还用于对所述用户图像进行图像识别,获得用户人脸图像,并查找所述用户人脸图像对应的用户设定携带物品;
291.所述物品确定模块,还用于查找所述用户设定携带物品的提醒时间区间;
292.所述物品确定模块,还用于获取当前时间,并根据所述当前时间和所述提醒时间区间对所述用户设定携带物品进行筛选,获得所述用户的待携带物品。
293.b17、如b14所述的物品携带提醒装置,所述物品确定模块,还用于在检测到用户的出门准备动作时,获取用户所在位置的环境信息;
294.所述物品确定模块,还用于根据所述环境信息确定所述用户的待携带物品。
295.b18、如b17所述的物品携带提醒装置,所述物品确定模块,还用于根据所述环境信息确定初始环境关联物品;
296.所述物品确定模块,还用于获取所述用户的用户信息,根据所述用户信息对所述初始环境关联物品进行筛选,获得所述用户的待携带物品。
297.本发明还公开了c19、一种物品携带提醒设备,所述物品携带提醒设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的物品携带提醒程序,所述物品携带提醒程序被所述处理器执行时实现如上文所述的物品携带提醒方法。
298.本发明还公开了d20、一种存储介质,所述存储介质上存储有物品携带提醒程序,所述物品携带提醒程序被处理器执行时实现如上文所述的物品携带提醒方法。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1