一种多镜头追踪方法、系统及装置与流程

本申请涉及监控领域，特别涉及一种多镜头追踪方法、系统及装置。

背景技术：

1、目前，目标追踪系统可以分为单目标追踪和多目标追踪两个子类。单目标追踪主要处理特定目标或简单场景下的追踪问题，而多目标追踪则更关注普通场景中多个目标的追踪。在实时追踪技术方面，单镜头多目标实时追踪比较成熟，但对于跨境头多目标实时追踪技术而言，由于需要同时使用多个镜头进行目标分析和特征比对，过程比较复杂，目前尚未出现成熟的技术。此外，目前仅有离线形式的跨境头多目标追踪技术，因此在跟踪反馈时也无法及时获取目标位置信息。

技术实现思路

1、本申请的目的是提供一种多镜头追踪方法、系统及装置，通过在不同监控视频之间传输目标对象的id信息和特征向量，并进行匹配和优化，可以实现对目标对象的连续追踪，从而在目标消失时确定下一目标监控视频，并继续进行追踪，该系统能够实现对目标对象的实时追踪，提高了跟踪的准确性和效率。

2、为解决上述技术问题，本申请提供了一种多镜头追踪方法，包括：

3、s1：在目标对象从当前监控装置对应的当前监控视频消失时，获取所述当前监控装置发送的所述目标对象的第一id信息和第一特征向量，并根据所述目标对象在所述当前监控视频中的消失位置确定下一监控装置采集到的下一监控视频，所述下一监控视频中所述目标对象的出现概率大于预设概率；

4、s2：将所述第一id信息和所述第一特征向量传输至所述下一监控装置，触发所述下一监控装置提取所述下一监控视频中各对象的第二特征向量；

5、s3：将所述第一特征向量和各所述第二特征向量进行匹配，并判断是否存在所述第二特征向量与所述第一特征向量匹配成功；

6、s4：若存在，则将匹配成功的第二特征向量对应的对象的id信息确定为所述第一id信息，并根据所述第一特征向量和所述第二特征向量得到目标对象更新后的特征向量，将所述更新后的特征向量作为所述第一特征向量，重新进入s1；

7、s5：若不存在，则结束对所述目标对象的追踪。

8、在一种实施例中，步骤s1之前，还包括：

9、对所述当前监控视频每一帧中的所述目标对象进行特征提取，得到特征向量矩阵；

10、在所述目标对象从所述当前监控视频消失时，对所述特征向量进行均值化处理，得到所述第一特征向量。

11、在一种实施例中，对所述当前监控视频每一帧中的所述目标对象进行特征提取，得到特征向量矩阵，包括：

12、确定所述当前监控视频中每一帧所述目标对象所在的图像框；

13、将所述图像框中除所述目标对象之外的背景区域剔除，得到纯净的目标对象图像；

14、对纯净的所述目标对象图像进行特征提取，得到所述特征向量矩阵。

15、在一种实施例中，步骤s1之前，还包括：

16、获取所述检测装置发送的所述目标对象对应的标识信息；

17、根据所述标识信息及标识-id的对应关系确定与所述标识信息对应的第一id信息。

18、在一种实施例中，提取所述目标对象对应的标识信息之后，还包括：

19、记录所述检测装置检测到所述标识信息时的时间戳；

20、根据所述时间戳及所述检测装置的安装位置确定所述目标对象对应的所述当前监控装置及所述当前监控视频。

21、在一种实施例中，在所述标识-id的对应关系中不存在与所述标识信息对应的id信息时，还包括：

22、为所述目标对象赋值id，以得到与所述目标对象对应的第一id信息。

23、在一种实施例中，在判定不存在与所述第一特征向量匹配成功的所述第二特征向量时，还包括：

24、为匹配失败的所述第二特征向量对应的对象赋值第二id信息。

25、在一种实施例中，步骤s3包括：

26、将所述第一特征向量和所述第二特征向量通过余弦距离的方式进行相似度比对；

27、若所述相似度大于预设值，则判定相似度大于所述预设值的所述第二特征向量与所述第一特征向量匹配成功，并将相似度大于所述预设值的所述第二特征向量对应的对象为所述目标对象，并将所述第二特征向量对应的对象的id信息确定为所述第一id信息。

28、为解决上述技术问题，本申请还提供了一种多镜头追踪系统，包括：

29、视频确定单元，用于在目标对象从当前监控装置对应的当前监控视频消失时，获取所述当前监控装置发送的所述当前监控视频中目标对象的第一id信息和第一特征向量，并根据所述目标对象在所述当前监控视频中的消失位置确定下一监控装置采集到的下一监控视频，所述下一监控视频中所述目标对象的出现概率大于预设概率；

30、向量处理单元，用于将所述第一id信息和所述第一特征向量传输至所述下一监控装置，触发所述下一监控装置提取所述下一监控视频中各对象的第二特征向量；

31、向量匹配单元，用于将所述第一特征向量和所述第二特征向量进行匹配，并判断是否存在所述第二特征向量与所述第一特征向量匹配成功；

32、向量更新单元，用于在存在所述第二特征向量与所述第一特征向量匹配成功时，将匹配成功的第二特征向量对应的对象的id信息确定为所述第一id信息，根据所述第一特征向量和所述第二特征向量得到目标对象更新后的特征向量，将所述更新后的特征向量作为所述第一特征向量；

33、结束单元，用于在不存在所述第二特征向量与所述第一特征向量匹配成功时，结束对所述目标对象的追踪。

34、为解决上述技术问题，本申请还提供了一种多镜头追踪装置，包括：

35、存储器，用于存储计算机程序；

36、处理器，用于在存储计算机程序时，实现如上述所述的多镜头追踪方法的步骤。

37、本申请提供了一种多镜头追踪方法、系统及装置，涉及监控领域，解决目前仅有离线形式的跨境头多目标追踪技术的问题。本申请中，通过在不同监控视频之间传输目标对象的id信息和特征向量，并进行匹配和优化，可以实现对目标对象的连续追踪，从而在目标消失时确定下一目标监控视频，并继续进行追踪，该系统能够实现对目标对象的实时追踪，提高了跟踪的准确性和效率。

技术特征：

1.一种多镜头追踪方法，其特征在于，包括：

2.如权利要求1所述的多镜头追踪方法，其特征在于，步骤s1之前，还包括：

3.如权利要求2所述的多镜头追踪方法，其特征在于，对所述当前监控视频每一帧中的所述目标对象进行特征提取，得到特征向量矩阵，包括：

4.如权利要求1所述的多镜头追踪方法，其特征在于，步骤s1之前，还包括：

5.如权利要求4所述的多镜头追踪方法，其特征在于，提取所述目标对象对应的标识信息之后，还包括：

6.如权利要求4所述的多镜头追踪方法，其特征在于，在所述标识-id的对应关系中不存在与所述标识信息对应的id信息时，还包括：

7.如权利要求1-6任一项所述的多镜头追踪方法，其特征在于，在判定不存在与所述第一特征向量匹配成功的所述第二特征向量时，还包括：

8.如权利要求1-6任一项所述的多镜头追踪方法，其特征在于，步骤s3包括：

9.一种多镜头追踪系统，其特征在于，包括：

10.一种多镜头追踪装置，其特征在于，包括：

技术总结
本申请公开了一种多镜头追踪方法、系统及装置，涉及监控领域，解决目前仅有离线形式的跨境头多目标追踪技术的问题。本申请中，通过在不同监控视频之间传输目标对象的ID信息和特征向量，并进行匹配和优化，可以实现对目标对象的连续追踪，从而在目标消失时确定下一目标监控视频，并继续进行追踪，该系统能够实现对目标对象的实时追踪，提高了跟踪的准确性和效率。

技术研发人员：胡鹏杰,乔辉,赵祯,刘文,关俊涛,游冰,杨建光,李刚,贺提胜
受保护的技术使用者：国机工业互联网研究院（河南）有限公司
技术研发日：
技术公布日：2024/1/16