人体关键点生成方法及装置、计算机可读存储介质、终端与流程

文档序号:36997658发布日期:2024-02-09 12:39阅读:来源:国知局

技术特征:

1.一种人体关键点生成方法,其特征在于,所述人体关键点包含人脸关键点和躯体关键点,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,在采用所述第二特征序列与预设的待匹配样本库中的至少一部分样本特征序列进行特征匹配之前,所述方法还包括:

3.根据权利要求2所述的方法,其特征在于,采用下述方式确定所述至少一部分样本特征序列:

4.根据权利要求2或3所述的方法,其特征在于,从与每个所述样本特征序列时序对齐的多帧样本图像中,选取一帧或多帧样本图像进行躯体关键点识别,包括:

5.根据权利要求1所述的方法,其特征在于,基于所述多组人脸关键点,以及所述相似度最高的样本特征序列对应的一组或多组躯体关键点进行拼接,包括:

6.根据权利要求1所述的方法,其特征在于,所述对目标音频进行第一特征提取,得到第一特征序列,然后对所述第一特征序列进行解码,得到多组人脸关键点,包括:

7.根据权利要求6所述的方法,其特征在于,所述音频特征提取子模型包括第一子模型和第二子模型;

8.根据权利要求7所述的方法,其特征在于,所述确定人脸关键点生成模型,包括:

9.一种人体关键点生成装置,其特征在于,所述人体关键点包含人脸关键点和躯体关键点,所述装置包括:

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器运行时执行权利要求1至8任一项所述人体关键点生成方法的步骤。

11.一种终端,包括存储器和处理器,所述存储器上存储有能够在所述处理器上运行的计算机程序,其特征在于,所述处理器运行所述计算机程序时执行权利要求1至8任一项所述人体关键点生成方法的步骤。


技术总结
一种人体关键点生成方法及装置、计算机可读存储介质、终端,所述人体关键点包含人脸关键点和躯体关键点,所述方法包括:对目标音频进行第一特征提取得到第一特征序列,然后解码得到多组人脸关键点,第一特征序列至少包含目标音频的语义信息和韵律信息;对目标音频进行第二特征提取得到第二特征序列,第二特征序列包含目标音频的语义信息且不包含韵律信息;采用第二特征序列与预设的待匹配样本库中的至少一部分样本特征序列进行特征匹配,以确定相似度最高的样本特征序列;基于所述多组人脸关键点,以及相似度最高的样本特征序列对应的一组或多组躯体关键点进行拼接,得到多组人体关键点。上述方案有助于提高生成的人体关键点的准确性和稳定性。

技术研发人员:虞钉钉,徐清,宣晓华,王晓梅,沈伟林,沈旭立,曹培
受保护的技术使用者:华院计算技术(上海)股份有限公司
技术研发日:
技术公布日:2024/2/8
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1