一种基于AR技术的多目标拣货系统和拣货方法与流程

本发明涉及拣货系统，尤其涉及一种基于ar技术的多目标拣货系统和拣货方法。

背景技术：

1、传统拣货方法是通过扫码枪、扫码指环或人工肉眼的方式进行拣货，拣货完成后核对订单、录入系统，需要人工动手操作，给用户带来不便。相关技术中，通过ar眼镜进行拣货，解放工人双手，但由于ar眼镜只能单目标识别，同一时间只能获取一个货物的编码进行一对一拣货，拣货效率低。随着企业不断发展，多目标场景下拣货的诉求日益增加，然而现有的ar拣货方案，仍是围绕单目标的应用场景，不能解决在多目标场景下拣货需求。

技术实现思路

1、本发明提供一种基于ar技术的多目标拣货系统和拣货方法，用以解决现有拣货方式拣货效率低，不能解决在多目标场景下拣货需求的缺陷。

2、本发明提供一种基于ar技术的多目标检测拣货系统，包括：

3、ar眼镜，用于将包含多个货物信息的视频流发送到智能分析系统，接收智能分析系统反馈的待拣货物的位置，并根据预设样式向用户提示待拣货物的位置；

4、智能分析系统，用于接收ar眼镜发送的视频流，从所述视频流中识别出待拣货物的位置，并向ar眼镜反馈待拣货物的位置。

5、根据本发明提供一种基于ar技术的多目标检测拣货系统，还包括：

6、企业管理系统，用于将待拣货物的编码信息发送到所述智能分析系统。

7、根据本发明提供一种基于ar技术的多目标检测拣货系统，所述智能分析系统还用于接收所述企业管理系统发送的待拣货物的编码信息，从所述视频流中识别出每个货物的编码信息和每个货物所在位置，将识别出的每个货物的编码信息与所述企业管理系统发送的待拣货物的编码信息进行对比，确定待拣货物的编码信息及待拣货物的位置。

8、根据本发明提供一种基于ar技术的多目标检测拣货系统，所述智能分析系统包括深度学习模块和ocr模块，所述从所述视频流中识别出每个货物的编码信息和每个货物所在位置，包括：

9、从所述视频流中依据获取货物的位置顺序依次截取每个货物信息对应图片，建立每个货物的位置与图片的关联关系；

10、通过所述深度学习模块检测出每张图片中货物的编码信息目标框；

11、通过所述ocr模块对每张图片中货物的编码信息目标框进行识别得到每个货物的编码信息，将每个货物的编码信息对应图片与所述每个货物的位置与图片的关联关系进行匹配，得到每个货物所在位置。

12、根据本发明提供一种基于ar技术的多目标检测拣货系统，所述智能分析系统还用于将识别出待拣货物的编码信息发送至所述企业管理系统，以使所述企业管理系统对待拣货物的编码信息进行复核。

13、根据本发明提供一种基于ar技术的多目标检测拣货系统，所述企业管理系统包括企业资源管理系统、仓库管理系统中的至少一种。

14、本发明还提供一种基于ar技术的多目标检测拣货方法，包括：

15、通过ar眼镜获取包含多个货物信息的视频流；

16、从所述视频流中识别出待拣货物的位置，并向ar眼镜反馈待拣货物的位置；

17、根据预设样式向用户提示待拣货物的位置。

18、根据本发明提供一种基于ar技术的多目标检测拣货方法，所述从所述视频流中识别出待拣货物的位置，包括：

19、从所述视频流中依据获取货物的位置顺序依次截取每个货物信息对应图片，建立每个货物的位置与图片的关联关系；

20、通过深度学习多目标检测方法检测出每张图片中货物的编码信息目标框；

21、通过ocr技术对每张图片中货物的编码信息目标框进行识别得到每个货物的编码信息，将每个货物的编码信息对应图片与所述每个货物的位置与图片的关联关系进行匹配，得到每个货物所在位置。

22、本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述基于ar技术的多目标检测拣货方法。

23、本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述基于ar技术的多目标检测拣货方法。

24、本发明提供的一种基于ar技术的多目标检测拣货系统包括ar眼镜，用于将包含多个货物信息的视频流发送到智能分析系统，接收智能分析系统反馈的待拣货物的位置，并根据预设样式向用户提示待拣货物的位置；智能分析系统，用于接收ar眼镜发送的视频流，从视频流中识别出待拣货物的位置，并向ar眼镜反馈待拣货物的位置，可以实现同时识别多个目标货物信息，解决现有技术下单目标识别造成检测效率低下的问题，提高拣货效率，缩短拣货时间。

技术特征：

1.一种基于ar技术的多目标检测拣货系统，其特征在于，包括：

2.根据权利要求1所述的基于ar技术的多目标检测拣货系统，其特征在于，还包括：

3.根据权利要求2所述的基于ar技术的多目标检测拣货系统，其特征在于，所述智能分析系统还用于接收所述企业管理系统发送的待拣货物的编码信息，从所述视频流中识别出每个货物的编码信息和每个货物所在位置，将识别出的每个货物的编码信息与所述企业管理系统发送的待拣货物的编码信息进行对比，确定待拣货物的编码信息及待拣货物的位置。

4.根据权利要求3所述的基于ar技术的多目标检测拣货系统，其特征在于，所述智能分析系统包括深度学习模块和ocr模块，所述从所述视频流中识别出每个货物的编码信息和每个货物所在位置，包括：

5.根据权利要求3所述的基于ar技术的多目标检测拣货系统，其特征在于，所述智能分析系统还用于将识别出待拣货物的编码信息发送至所述企业管理系统，以使所述企业管理系统对待拣货物的编码信息进行复核。

6.根据权利要求2～5任一项所述的基于ar技术的多目标检测拣货系统，其特征在于，所述企业管理系统包括企业资源管理系统、仓库管理系统中的至少一种。

7.一种基于ar技术的多目标检测拣货方法，其特征在于，包括：

8.根据权利要求7所述的基于ar技术的多目标检测拣货方法，其特征在于，所述从所述视频流中识别出待拣货物的位置，包括：

9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求7或8所述基于ar技术的多目标检测拣货方法。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求7或8所述基于ar技术的多目标检测拣货方法。

技术总结
本发明提供一种基于AR技术的多目标拣货系统和拣货方法，基于AR技术的多目标检测拣货系统，包括：AR眼镜，用于将包含多个货物信息的视频流发送到智能分析系统，接收智能分析系统反馈的待拣货物的位置，并根据预设样式向用户提示待拣货物的位置；智能分析系统，用于接收AR眼镜发送的视频流，从视频流中识别出待拣货物的位置，并向AR眼镜反馈待拣货物的位置，可以实现同时识别多个目标货物信息，解决现有技术下单目标识别造成检测效率低下的问题，提高拣货效率，缩短拣货时间。

技术研发人员：杨晓哲,张立,吴斐,陆希炜
受保护的技术使用者：北京亮亮视野科技有限公司
技术研发日：
技术公布日：2024/1/13