一种跨域双模态特征融合的实时人体行为识别方法与流程

文档序号:35102099发布日期:2023-08-10 09:22阅读:来源:国知局

技术特征:

1.一种跨域双模态特征融合的实时人体行为识别方法,其特征在于,是按如下步骤进行:

2.根据权利要求1所述的一种跨域双模态特征融合的实时人体行为识别方法,其特征在于,所述步骤3.1中的csi动作特征提取模块由一层gat网络、一层int网络、一层平均池化层avgpool和一层flatten网络构成;其中,所述gat网络由a个图注意力层构成;所述int网络是由b个inception网络构成;

3.根据权利要求2所述的一种跨域双模态特征融合的实时人体行为识别方法,其特征在于,所述步骤3.2中的视频动作特征提取模块包括:空间特征提取模块和时间特征提取模块;

4.一种电子设备,包括存储器以及处理器,其特征在于,所述存储器用于存储支持处理器执行权利要求1-3中任一所述实时人体行为识别方法的程序,所述处理器被配置为用于执行所述存储器中存储的程序。

5.一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器运行时执行权利要求1-3中任一所述实时人体行为识别方法的步骤。


技术总结
本发明公开了一种跨域双模态特征融合的实时人体行为识别方法,其步骤包括:1、采集CSI动作样本数据和视频样本数据;2、对采集数据进行预处理;3、构建双线程动作特征提取网络提取CSI样本和视频样本中的动作特征;4、构建特征融合和特征对齐网络将两个模态的动作特征进行融合;5、将融合特征输入到分类器网络进行人体动作识别。本发明基于CSI和视频双模态信息实现行为识别,具有较强的识别准确性和抗干扰能力。

技术研发人员:章丹,吕妍,孙巍巍,吴海艳,施雯,王远,胡茂亮,廖羽晗,邱曼曼,霍骋,陈迎,罗长,万礼嵩,赵晓山,王法治,郭可贵,韩玉,孟磊,马欢,沈风,罗俊骁
受保护的技术使用者:国网安徽省电力有限公司超高压分公司
技术研发日:
技术公布日:2024/1/14
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1