技术特征：
1.一种人体重建方法，其特征在于，包括：获取待处理图像序列，并获取所述待处理图像序列对应的待处理光流序列，所述待处理图像序列包括人体；对所述待处理图像序列提取第一时序特征，对所述待处理光流序列提取第二时序特征；根据所述第一时序特征与所述第二时序特征生成所述待处理图像序列对应的人体参数。2.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取预先训练的人体参数重建网络，所述人体参数重建网络包括视觉编码网络、光流编码网络与融合处理网络；所述对所述待处理图像序列提取第一时序特征，对所述待处理光流序列提取第二时序特征，包括：利用所述视觉编码网络对所述待处理图像序列提取所述第一时序特征，利用所述光流编码网络对所述待处理光流序列提取所述第二时序特征；所述根据所述第一时序特征与所述第二时序特征生成所述待处理图像序列对应的人体参数，包括：利用所述融合处理网络将所述第一时序特征与所述第二时序特征进行融合处理，得到所述待处理图像序列对应的人体参数。3.根据权利要求2所述的方法，其特征在于，所述方法还包括：获取样本图像序列以及所述样本图像序列对应的样本光流序列与人体参数标签；将所述样本图像序列与所述样本光流序列输入待训练的所述人体参数重建网络，以输出所述样本图像序列对应的人体参数样本；基于所述人体参数样本与所述人体参数标签，更新所述人体参数重建网络的参数。4.根据权利要求3所述的方法，其特征在于，所述基于所述人体参数样本与所述人体参数标签，更新所述人体参数重建网络的参数，包括以下至少一种：基于所述人体参数样本与所述人体参数标签的差别，更新所述人体参数重建网络的参数；利用第一判别器判别所述人体参数样本或所述人体参数标签是否为真实数据，根据相应的第一判别结果更新所述人体参数重建网络的参数；利用第二判别器判别同一样本图像序列对应的所述人体参数样本与所述人体参数标签是否为相同的人体动作，根据相应的第二判别结果更新所述人体参数重建网络的参数；利用第三判别器判别所述人体参数样本、所述人体参数标签、或人体参数混合数据是否对应于连续的人体动作，根据相应的第三判别结果更新所述人体参数重建网络的参数，所述人体参数混合数据由同一样本图像序列对应的所述人体参数样本与所述人体参数标签进行混合而得到。5.根据权利要求2所述的方法，其特征在于，所述视觉编码网络包括视觉卷积神经网络与视觉transformer；所述利用所述视觉编码网络对所述待处理图像序列提取所述第一时序特征，包括：利用所述视觉卷积神经网络对所述待处理图像序列提取图像序列特征；
利用所述视觉transformer对所述图像序列特征进行时序编码，得到所述第一时序特征。6.根据权利要求2所述的方法，其特征在于，所述融合处理网络包括第一融合层与第二融合层；所述人体参数包括人体体型参数与人体姿态参数；所述利用所述融合处理网络将所述第一时序特征与所述第二时序特征进行融合处理，得到所述待处理图像序列对应的人体参数，包括：利用所述第一融合层提取所述第一时序特征与所述第二时序特征的共性特征；利用所述第二融合层提取所述第一时序特征与所述第二时序特征的差异特征；根据所述共性特征与所述差异特征确定所述待处理图像序列对应的人体体型参数与人体姿态参数。7.根据权利要求1所述的方法，其特征在于，所述根据所述第一时序特征与所述第二时序特征生成所述待处理图像序列对应的人体参数，包括：将所述第一时序特征与所述第二时序特征进行融合，并对融合后的数据进行回归处理，得到所述待处理图像序列对应的人体参数。8.一种人体重建装置，其特征在于，包括：数据获取模块，被配置为获取待处理图像序列，并获取所述待处理图像序列对应的待处理光流序列，所述待处理图像序列包括人体；特征提取模块，被配置为对所述待处理图像序列提取第一时序特征，对所述待处理光流序列提取第二时序特征；人体参数生成模块，被配置为根据所述第一时序特征与所述第二时序特征生成所述待处理图像序列对应的人体参数。9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7任一项所述的方法。10.一种电子设备，其特征在于，包括：处理器；以及存储器，用于存储所述处理器的可执行指令；其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1至7任一项所述的方法。
技术总结
本公开提供一种人体重建方法、装置、计算机可读存储介质与电子设备，涉及计算机视觉技术领域。该人体重建方法包括：获取待处理图像序列，并获取所述待处理图像序列对应的待处理光流序列，所述待处理图像序列包括人体；对所述待处理图像序列提取第一时序特征，对所述待处理光流序列提取第二时序特征；根据所述第一时序特征与所述第二时序特征生成所述待处理图像序列对应的人体参数。本公开采用图像序列与光流序列这样的双模态信息以进行时序特征的提取，有利于提升人体重建的准确性。有利于提升人体重建的准确性。有利于提升人体重建的准确性。
技术研发人员：徐博 黄晗 郭彦东
受保护的技术使用者：OPPO广东移动通信有限公司
技术研发日：2022.02.23
技术公布日：2022/5/31