一种基于多源数据融合的智能视频监控方法及系统与流程

文档序号:40419991发布日期:2024-12-24 14:53阅读:来源:国知局

技术特征:

1.一种基于多源数据融合的智能视频监控方法,其特征在于,包括以下步骤:

2.如权利要求1所述的一种基于多源数据融合的智能视频监控方法,其特征在于:所述s1中多源视频数据包括可见光行人视频数据和红外光行人视频数据,对多源视频数据进行标准化、去噪,并对空间分辨率和亮度进行统一调整,获得预处理后的多源视频数据。

3.如权利要求1所述的一种基于多源数据融合的智能视频监控方法,其特征在于:所述s2中的时空特征编解码网络包括3d编码模块、2d解码模块、重采样模块、时域降采样模块和时空一致性判别器,将可见光视频数据和红外视频数据输入时空特征编解码网络获得异常行为检测初步结果的具体步骤如下:

4.如权利要求1所述的一种基于多源数据融合的智能视频监控方法,其特征在于:所述时空特征编解码网络通过时空一致性训练策略进行优化训练,时空一致性训练策略的代价函数由像素级的误差平方函数和对抗损失函数组成;

5.如权利要求1所述的一种基于多源数据融合的智能视频监控方法,其特征在于:所述s4中的特征识别网络包括特征学习模块和特征映射模块,所述特征学习模块由卷积神经网络、全连接层、批归一化层组成;所述特征映射模块由随机失活层、全连接层、二范数归一化层构成;特征识别网络实现行人异常行为图像的特征提取的具体步骤如下:

6.如权利要求5所述的一种基于多源数据融合的智能视频监控方法,其特征在于:所述s4中特征识别网络基于超球面流形和kl散度的度量学习策略进行训练,具体为:

7.如权利要求1所述的一种基于多源数据融合的智能视频监控方法,其特征在于:所述s5中基于双对齐特征嵌入的跨模态行人特征配准网络的具体处理过程为:

8.如权利要求7所述的一种基于多源数据融合的智能视频监控方法,其特征在于:所述基于双对齐特征嵌入的跨模态行人特征配准网络通过模态一致性度量学习策略进行训练,包括类内分布约束损失函数和类间相关性约束损失函数,具体如下:

9.一种基于多源数据融合的智能视频监控系统,应用于如权利要求1至8任意一项所述的智能视频监控方法,其特征在于,包括:视频获取模块和后端服务器;


技术总结
本发明提供了一种基于多源数据融合的智能视频监控方法及系统,属于视频数据分析技术领域。首先获取多源视频数据,并进行预处理;将预处理后的视频数据输入到时空特征编解码网络中,得到行人图像异常行为检测初步结果;基于得到的检测初步结果,对异常行为中的行人图像进行提取,获得异常行为图像数据;将获得的异常行为图像数据输入到特征识别网络,获得特征向量;最后将获得的特征向量输入基于双对齐特征嵌入的跨模态行人特征配准网络,获得最终的行人图像异常行为检测结果。提供了一种基于多源数据融合且高效稳定的异常事件检测方法,能够融合多源监控数据并适应不同场景和光照条件的变化,及时识别监控场景中突发性异常行为。

技术研发人员:刘晓国,张彩玲
受保护的技术使用者:青岛宝森网络科技有限公司
技术研发日:
技术公布日:2024/12/23
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1