一种基于骨架时空联合特征交互增强的跨视角步态识别方法

文档序号:39020029发布日期:2024-08-16 15:46阅读:来源:国知局

技术特征:

1.一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,包括步骤如下:

2.根据权利要求1所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,步骤a中,对步态骨架序列数据即t帧人体骨架图组成的序列进行预处理,包括步骤如下:

3.根据权利要求1所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,对步骤a增强后的骨架图序列,计算与关节位置、运动速度和骨骼相关的三类骨架描述符,并将三类骨架描述符结合起来,形成骨架步态表示;包括:

4.根据权利要求1所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,步骤b中,全局时空特征提取网络构建,包括:

5.根据权利要求1所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,步骤c中,微时空联合特征提取网络构建,包括:

6.根据权利要求1所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,步骤d中,分层特征交互增强融合模块构建,包括步骤如下:

7.根据权利要求1所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,所述步骤e,整体框架训练,包括步骤如下:

8.根据权利要求1所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,采用三元组损失对整体框架进行训练,独立计算每个输出特征的三元组损失,全局时空特征提取网络的三元组损失的计算方式如下公式表示:

9.根据权利要求1-8任一所述的一种基于多尺度骨架时空特征提取的跨视角步态识别方法,其特征在于,所述步骤f,跨视角步态识别,包括:


技术总结
本发明涉及一种基于骨架时空联合特征交互增强的跨视角步态识别方法,包括骨架数据预处理、全局时空特征提取网络构建、微时空联合特征提取网络构建、分层特征交互增强融合模块构建、整体框架训练及跨视角步态识别。本发明全局时空特征提取网络,将基于自注意力邻接矩阵的图卷积与大核时间卷积相结合,动态建模关键点间的全局空间关系和长程时间关系。本发明微时空联合特征提取网络,将几帧骨架图聚合为一个时空图,通过时空联合图卷积捕捉关键点间微小的短程动态特征。本发明分层特征交互增强融合模块,在归纳出信息量更大的互补特征的同时避免了对原始分支的负面影响。

技术研发人员:贲晛烨,许文正,张军平,徐尊晓,于仕琪,杨刚强,周洪超
受保护的技术使用者:山东大学
技术研发日:
技术公布日:2024/8/15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1