基于物品识别的智能体交互方法、装置、设备及存储介质与流程

文档序号:32782887发布日期:2022-12-31 16:42阅读:来源:国知局

技术特征:
1.基于物品识别的智能体交互方法,其特征在于,包括:获取物品图像;对所述物品图像进行目标检测,以得到检测结果;对所述检测结果进行物品类型识别,以得到物品识别结果;根据所述物品识别结果注入智能体,以得到注入智能体的物品,使得用户与注入智能体的物品进行交互。2.根据权利要求1所述的基于物品识别的智能体交互方法,其特征在于,所述对所述物品图像进行目标检测,以得到检测结果,包括:采用目标检测模型对所述物品图像进行目标检测,以得到检测结果。3.根据权利要求2所述的基于物品识别的智能体交互方法,其特征在于,所述目标检测模型是以yolov5模型为基础,通过模型剪枝、通道剪枝、减少anchor的方式,结合非极大值抑制算法实现的。4.根据权利要求1所述的基于物品识别的智能体交互方法,其特征在于,所述对所述检测结果进行物品类型识别,以得到物品识别结果,包括:对所述检测结果进行物品视觉特征提取,以得到提取结果;根据所述提取结果进行特征检索,以得到检索结果;根据所述检索结果确定物品类型,以得到物品识别结果。5.根据权利要求4所述的基于物品识别的智能体交互方法,其特征在于,所述对所述检测结果进行物品视觉特征提取,以得到提取结果,包括:对所述检测结果采用基于mobilenetv2的识别网络进行物品特征提取,以得到提取结果。6.根据权利要求4所述的基于物品识别的智能体交互方法,其特征在于,所述根据所述提取结果进行特征检索,以得到检索结果,包括:通过开源的faiss框架建立特征检索引擎,并选择乘积量化优化索引,检索与所述提取结果相似的目标物品,以得到检索结果。7.根据权利要求4所述的基于物品识别的智能体交互方法,其特征在于,所述根据所述检索结果确定物品类型,以得到物品识别结果,包括:筛选符合要求的检索结果,以得到筛选结果;对所述筛选结果采用非极大值抑制算法消除边界框,以得到物品识别结果。8.基于物品识别的智能体交互装置,其特征在于,包括:图像获取单元,用于获取物品图像;目标检测单元,用于对所述物品图像进行目标检测,以得到检测结果;识别单元,用于对所述检测结果进行物品类型识别,以得到物品识别结果;注入单元,用于根据所述物品识别结果注入智能体,以得到注入智能体的物品,使得用户与注入智能体的物品进行交互。9.一种计算机设备,其特征在于,所述计算机设备包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的方法。10.一种存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序被
处理器执行时实现如权利要求1至7中任一项所述的方法。

技术总结
本发明实施例公开了基于物品识别的智能体交互方法、装置、设备及存储介质。所述方法包括:获取物品图像;对所述物品图像进行目标检测,以得到检测结果;对所述检测结果进行物品类型识别,以得到物品识别结果;根据所述物品识别结果注入智能体,以得到注入智能体的物品,使得用户与注入智能体的物品进行交互。通过实施本发明实施例的方法可实现物品真正站在物品的视角与用户进行交互。在物品的视角与用户进行交互。在物品的视角与用户进行交互。


技术研发人员:陈阳 石翔飞 舒会 顾宇鑫 鲍方毅
受保护的技术使用者:杭州心识宇宙科技有限公司
技术研发日:2022.11.24
技术公布日:2022/12/30
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1