处理目标轨迹的方法、装置及存储介质与流程

本公开内容总体上涉及信息处理和计算机视觉，更具体的，涉及用于目标跟踪中处理目标轨迹的方法、装置及存储介质。

背景技术：

1、随着计算机科学与人工智能的发展，计算机视觉技术得到了进一步的发展。计算机视觉技术包括对摄像头捕获的图像序列(视频)进行目标跟踪的目标跟踪技术。目标跟踪可以对视频中的诸如行人、汽车或/或动物的多个感兴趣类型的目标进行检测并根据目标赋予标识(id)，以获得不同目标的轨迹。理想的跟踪结果为：不同的目标的轨迹被标识为相应的不同id，相同目标的多段轨迹被用同一id标识。根据所使用摄像头的数量，目标跟踪可以分为多摄像头多目标跟踪和单摄像头多目标跟踪。为了获得可靠的监视效果，通常对较大的空间使用多摄像的目标跟踪。目标跟踪可以利用目标跟踪模型实现。

2、在多目标跟踪中，针对输入视频，输出目标的跟踪结果。在跟踪结果图像中，每个目标例如用具有对应id标识的矩形外接框指示。在视频的多个帧的图像序列中，同一id的外接框的移动轨迹，可视为该id的目标的轨迹。在这多个帧中，该id外接框所指示多个图像块的图像块序列被称为跟踪小片段(tacklet)。在一个跟踪小片段中，其中的每个图像块，可视为该跟踪小片段的一帧图像，可为每帧图像分配表征目标轨迹的时间信息和空间位置信息的信息。换言之，目标轨迹上轨迹点可以具有位置属性、时间属性，以及表征图像块中的目标特征的重识别特征。位置属性可以用来表示目标在真实空间中的位置(如目标在真实空间的二维投影平面内的坐标)。时间属性可以用来表示所对应的摄像头捕获图像的拍摄时间。重识别特征可以用于识别目标。

3、常见的，线下销售场所配备一个或多个监视摄像头。能够理解，可以利用目标跟踪模型获得选定目标在销售场所内的轨迹。考虑到遮挡(如，顾客被货架、物品遮挡)、光照、人员密集等因素。对线下销售场所内顾客的目标跟踪效果可能受限的。例如，跟踪模型给出的名义上的多个顾客的多条轨迹，实际为同一顾客的轨迹，或者，同一顾客的轨迹的多个分段在时间上并不连续。另外，销售场所的顾客在结账时，会产生购物收据数据，商家会将包含购物收据数据的购物收据提供给顾客。购物收据数据包含顾客购买的物品的列表、结账时间等信息。通常情况下，目标跟踪模型或目标跟踪方法并不能指示对应一个购物收据的购物收据数据组对应哪个目标(顾客)轨迹，即，不能将某顾客的一个购物收据数据组与其对应的轨迹关联起来。

技术实现思路

1、在下文中将给出关于本公开内容的简要概述，以便提供关于本公开内容的某些方面的基本理解。应当理解，此概述并不是关于本公开内容的穷举性概述。它并不是意图确定本公开内容的关键或重要部分，也不是意图限定本公开内容的范围。其目的仅仅是以简化的形式给出某些概念，以此作为稍后论述的更详细描述的前序。

2、确定对应同一顾客的购物收据数据组及其匹配轨迹是期望的。发明人研究了线下销售场所的购物收据和目标跟踪。构思了本公开内容的技术方案。本公开内容的实施例解决的技术问题包括但不限于以下中的至少一个：确定与一个购物收据数据组匹配的对应顾客轨迹；以及，改善目标跟踪的准确度。

3、根据本公开内容的一个方面，提供了一种目标跟踪中处理目标轨迹的方法，包括：确定对应多个购物收据中的一个购物收据的收据数据组的候选顾客轨迹集；针对候选顾客轨迹集中的每条轨迹，统计在收据数据组指示的售出物品集中在位置上与该轨迹匹配的售出物品的数量作为该轨迹的第一位置匹配计数；针对候选顾客轨迹集中的每条轨迹，统计在售出物品集中在位置上与该轨迹的感兴趣轨迹点集中的感兴趣轨迹点匹配的售出物品的数量作为该轨迹的第二位置匹配计数；以及基于候选顾客轨迹集中的多条轨迹的第一位置匹配计数和第二位置匹配计数在候选顾客轨迹集中确定与收据数据组对应的顾客轨迹；其中，候选顾客轨迹集中的每条轨迹的感兴趣轨迹点集中包括的感兴趣轨迹点为指示该轨迹的对应顾客对线下销售场所中陈列的待出售物品表现出兴趣的位置的轨迹点。

4、根据本公开内容的另一方面，提供了一种用于多目标多摄像头跟踪的装置。该装置包括：存储器，其上存储有指令；以及至少一个处理器，被配置成执行指令以：确定对应多个购物收据中的一个购物收据的收据数据组的候选顾客轨迹集；针对候选顾客轨迹集中的每条轨迹，统计在收据数据组指示的售出物品集中在位置上与该轨迹匹配的售出物品的数量作为该轨迹的第一位置匹配计数；针对候选顾客轨迹集中的每条轨迹，统计在售出物品集中在位置上与该轨迹的感兴趣轨迹点集中的感兴趣轨迹点匹配的售出物品的数量作为该轨迹的第二位置匹配计数；以及基于候选顾客轨迹集中的多条轨迹的第一位置匹配计数和第二位置匹配计数在候选顾客轨迹集中确定与收据数据组对应的顾客轨迹；其中，候选顾客轨迹集中的每条轨迹的感兴趣轨迹点集中包括的感兴趣轨迹点为指示该轨迹的对应顾客对线下销售场所中陈列的待出售物品表现出兴趣的位置的轨迹点。

5、根据本公开内容的又一方面，提供了一种存储有程序的计算机可读非暂态存储介质。当程序被计算机执行时，计算机实现以下操作：确定对应多个购物收据中的一个购物收据的收据数据组的候选顾客轨迹集；针对候选顾客轨迹集中的每条轨迹，统计在收据数据组指示的售出物品集中在位置上与该轨迹匹配的售出物品的数量作为该轨迹的第一位置匹配计数；针对候选顾客轨迹集中的每条轨迹，统计在售出物品集中在位置上与该轨迹的感兴趣轨迹点集中的感兴趣轨迹点匹配的售出物品的数量作为该轨迹的第二位置匹配计数；以及基于候选顾客轨迹集中的多条轨迹的第一位置匹配计数和第二位置匹配计数在候选顾客轨迹集中确定与收据数据组对应的顾客轨迹；其中，候选顾客轨迹集中的每条轨迹的感兴趣轨迹点集中包括的感兴趣轨迹点为指示该轨迹的对应顾客对线下销售场所中陈列的待出售物品表现出兴趣的位置的轨迹点。

6、本公开内容的方法、装置以及存储介质的有益效果包括以下中的至少一个：确定与一个购物收据数据组匹配的顾客轨迹；以及改善目标跟踪的准确度。

技术特征：

1.一种目标跟踪中处理目标轨迹的方法，其特征在于，包括：

2.根据权利要求1所述的方法，其中，所述收据数据组包括指示顾客的已购买物品的物品名称列表和购买时间信息。

3.根据权利要求2所述的方法，其特征在于，还包括：使用目标跟踪模型确定包括所述线下销售场所中的顾客轨迹的顾客轨迹集；以及

4.根据权利要求1所述的方法，其中，针对所述候选顾客轨迹集中的每条轨迹，当该轨迹与所述售出物品集中的售出物品中的一个物品的陈列区域的最小距离小于第一距离阈值，则该轨迹的第一位置匹配计数增加1。

5.根据权利要求1所述的方法，其中，针对所述候选顾客轨迹集中的每条轨迹，当该轨迹的感兴趣轨迹点集中的感兴趣轨迹点与所述售出物品集中的售出物品中的一个物品的陈列区域的距离中的最小距离小于第二距离阈值，则该轨迹的第二位置匹配计数增加1。

6.根据权利要求1所述的方法，其中，基于所述候选顾客轨迹集中的多条轨迹的第一位置匹配计数和第二位置匹配计数在所述候选顾客轨迹集中确定与所述收据数据组对应的顾客轨迹包括：

7.根据权利要求6所述的方法，其特征在于，还包括执行顾客轨迹校正操作，所述顾客轨迹校正操作包括：

8.根据权利要求7所述的方法，其特征在于，还包括：

9.一种用于处理目标轨迹的装置，其特征在于，包括：

10.一种存储有程序的计算机可读非暂态存储介质，其特征在于，当所述程序被计算机执行时，所述计算机实现以下操作：

技术总结
本公开内容涉及处理目标轨迹的方法、装置及存储介质。根据本公开内容的一个实施例，该处理目标轨迹的方法包括：确定对应多个购物收据中的一个购物收据的收据数据组的候选顾客轨迹集；针对候选顾客轨迹集中的每条轨迹，统计在收据数据组指示的售出物品集中在位置上与该轨迹匹配的售出物品的数量作为该轨迹的第一位置匹配计数；针对候选顾客轨迹集中的每条轨迹，统计在售出物品集中在位置上与该轨迹的感兴趣轨迹点集中的感兴趣轨迹点匹配的售出物品的数量作为该轨迹的第二位置匹配计数；以及基于候选顾客轨迹集中的多条轨迹的第一位置匹配计数和第二位置匹配计数在候选顾客轨迹集中确定与收据数据组对应的顾客轨迹。

技术研发人员：汪留安,张慧港,王平,孙俊
受保护的技术使用者：富士通株式会社
技术研发日：
技术公布日：2024/3/17