一种人体姿态估计方法及相关装置与流程

本申请涉及图像处理，尤其涉及一种人体姿态估计方法及相关装置。

背景技术：

1、近年来，随着深度学习技术的不断进步，人体姿态估计(也即人体骨架点检测)得到了较大发展，人体骨架点包括关节、五官等，通过这些关键点可以描述人体骨骼信息。目前，人体姿态估计技术在实际场景中的应用也越来越广泛，如娱乐健身、康复训练、动作识别等。

2、然而，在实际应用场景下，待检测图像中可能存在复杂背景，进而在人体姿态估计过程中容易受背景干扰而导致人体骨架点误检的问题。而为了克服此类问题，在相关技术中，针对当前帧待检测图像，通常直接将前一帧图像的背景区域作为参考，来获取当前帧图像的前景目标，然后对所获取的前景目标进行人体骨架点检测，但是，在运动场景下，前一帧图像的背景区域与当前帧图像的实际背景区域仅是具备一定相似性，在复杂运动场景下并不能为当前帧图像的人体骨架点检测提供准确参考，在实际应用中仍然存在较高的误检可能性，人体骨架点检测结果的整体准确性相对较低。

技术实现思路

1、本申请实施例提供了一种人体姿态估计方法及相关装置，至少能够解决相关技术中所提供的人体姿态估计方案的误检可能性较高，人体骨架点检测结果的整体准确性相对较低的问题。

2、本申请实施例第一方面提供了一种人体姿态估计方法，包括：基于连续预设帧数的第一原始图像，获取背景区域图像集；其中，所述背景区域图像集包括对应于多帧所述第一原始图像的多张背景区域图像；利用所述背景区域图像集进行背景建模，得到完整背景图像；对第二原始图像以及所述完整背景图像进行差分运算，得到对应于所述第二原始图像的前景目标图像；其中，所述第二原始图像的帧序号取值大于所述预设帧数；对所述前景目标图像进行特征提取及预测，得到对应于所述第二原始图像的人体姿态估计结果。

3、本申请实施例第二方面提供了一种人体姿态估计装置，包括：获取模块，用于基于连续预设帧数的第一原始图像，获取背景区域图像集；其中，所述背景区域图像集包括对应于多帧所述第一原始图像的多张背景区域图像；建模模块，用于利用所述背景区域图像集进行背景建模，得到完整背景图像；运算模块，用于对第二原始图像以及所述完整背景图像进行差分运算，得到对应于所述第二原始图像的前景目标图像；其中，所述第二原始图像的帧序号取值大于所述预设帧数；估计模块，用于对所述前景目标图像进行特征提取及预测，得到对应于所述第二原始图像的人体姿态估计结果。

4、本申请实施例第三方面提供了一种电子设备，包括：图像采集装置及处理器，其中：图像采集装置用于采集原始图像并传输至所述处理器；处理器用于利用上述本申请实施例第一方面提供的人体姿态估计方法对所述原始图像进行处理，以获取人体姿态估计结果。

5、本申请实施例第四方面提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时，实现上述本申请实施例第一方面提供的人体姿态估计方法中的各步骤。

6、由上可见，根据本申请方案所提供的人体姿态估计方法及相关装置，基于连续预设帧数的第一原始图像，获取背景区域图像集；利用背景区域图像集进行背景建模，得到完整背景图像；对帧序号取值大于预设帧数的第二原始图像以及完整背景图像进行差分运算，得到对应于第二原始图像的前景目标图像；对前景目标图像进行特征提取及预测，得到对应于第二原始图像的人体姿态估计结果。通过本申请方案的实施，对多帧原始图像进行背景建模可获得较为完整的背景图，然后基于完整背景图对待检测图像进行去背景处理，再对前景目标进行姿态估计，可排除大部分背景干扰导致的误检，有效提高了人体骨架点检测结果的准确性。

技术特征：

1.一种人体姿态估计方法，其特征在于，包括：

2.根据权利要求1所述的人体姿态估计方法，其特征在于，所述对所述前景目标图像进行特征提取及预测，得到对应于所述第二原始图像的人体姿态估计结果的步骤，包括：

3.根据权利要求2所述的人体姿态估计方法，其特征在于，所述特征提取网络包括最大池化模块、多个级联的卷积模块以及平均池化模块；

4.根据权利要求2所述的人体姿态估计方法，其特征在于，所述姿态预测网络包括多个级联的stage模块，所述stage模块包括关键点置信度预测网络以及关键点亲和度向量场预测网络；

5.根据权利要求1所述的人体姿态估计方法，其特征在于，所述基于连续预设帧数的第一原始图像，获取背景区域图像集的步骤，包括：

6.根据权利要求2所述的人体姿态估计方法，其特征在于，所述基于连续预设帧数的第一原始图像，获取背景区域图像集的步骤，包括：

7.根据权利要求1至6中任意一项所述的人体姿态估计方法，其特征在于，所述利用所述背景区域图像集进行背景建模，得到完整背景图像的步骤，包括：

8.一种人体姿态估计装置，其特征在于，包括：

9.一种电子设备，其特征在于，包括图像采集装置及处理器，其中：

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现权利要求1至7中的任意一项所述人体姿态估计方法中的步骤。

技术总结
本申请提供了一种人体姿态估计方法及相关装置，该人体姿态估计方法包括：基于连续预设帧数的第一原始图像，获取背景区域图像集；利用背景区域图像集进行背景建模，得到完整背景图像；对帧序号取值大于预设帧数的第二原始图像以及完整背景图像进行差分运算，得到对应于第二原始图像的前景目标图像；对前景目标图像进行特征提取及预测，得到对应于第二原始图像的人体姿态估计结果。通过本申请方案的实施，对多帧原始图像进行背景建模可获得较为完整的背景图，然后基于完整背景图对待检测图像进行去背景处理，再对前景目标进行姿态估计，可排除大部分背景干扰导致的误检，有效提高了人体骨架点检测结果的准确性。

技术研发人员：陈宇
受保护的技术使用者：奥比中光科技集团股份有限公司
技术研发日：
技术公布日：2024/1/11