姿态估计方法、电子设备以及存储介质与流程

专利检索2025-08-03  23


本申请涉及图像处理,特别是涉及一种姿态估计方法、电子设备以及存储介质。


背景技术:

1、多人姿态估计作为计算机视觉领域的基础任务之一,在增强现实、虚拟现实以及人机交互等领域有着广泛应用。多人姿态估计是指通过技术手段得到图像中索引人的关键点位置。目前,多人姿态估计的方式包括先检测图像中单个的人,再检测每个人的关键点,两个检测阶段均包含特定的预处理和后处理步骤,整体推理时间较长。


技术实现思路

1、本申请至少提供一种姿态估计方法、电子设备以及存储介质。

2、本申请提供了一种姿态估计方法,包括:获取目标图像,目标图像中包括一个或多个目标对象;对目标图像进行特征提取,得到多个初始特征;将多个初始特征与姿态特征库中的各姿态特征进行匹配,确定与各初始特征匹配的目标姿态特征,其中,姿态特征库中包括多个姿态特征,至少部分姿态特征的组合对应一种姿态;对各目标姿态特征进行姿态解码,分别得到目标图像中各目标对象的姿态。

3、本申请提供了一种姿态估计装置,包括:图像获取模块、特征提取模块、特征匹配模块以及姿态估计模块;图像获取模块用于获取目标图像,目标图像中包括一个或多个目标对象;特征提取模块用于对目标图像进行特征提取,得到多个初始特征;特征匹配模块用于将多个初始特征与姿态特征库中的各姿态特征进行匹配,确定与各初始特征匹配的目标姿态特征,其中,姿态特征库中包括多个姿态特征,至少部分姿态特征的组合对应一种姿态;姿态估计模块对各目标姿态特征进行姿态解码,分别得到目标图像中各目标对象的姿态。

4、本申请提供了一种电子设备,包括存储器和处理器,处理器用于执行存储器中存储的程序指令,以实现上述姿态估计方法。

5、本申请提供了一种计算机可读存储介质,其上存储有程序指令,程序指令被处理器执行时实现上述姿态估计方法。

6、上述方案,通过预先建立存储有多个姿态特征的姿态特征库,其中姿态特征库中部分姿态特征经过解码之后可以确定一种姿态,通过将目标图像中提取得到的初始特征与姿态特征库中的各姿态特征进行匹配,从而确定与各初始特征匹配的姿态特征,从而可以根据匹配得到的姿态特征进行姿态解码,确定目标图像中各目标对象的姿态。相对于现有技术的二阶段的检测的多人姿态估计方法而言,本申请能够缩短推理时间。

7、应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本申请。



技术特征:

1.一种姿态估计方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述将所述多个初始特征与姿态特征库中的各姿态特征进行匹配,确定与各所述初始特征匹配的目标姿态特征,包括:

3.根据权利要求1所述的方法,其特征在于,所述对各所述目标姿态特征进行姿态解码,分别得到所述目标图像中各目标对象的姿态,包括:

4.根据权利要求1至3中任意一项所述的方法,其特征在于,所述对所述目标图像进行特征提取,得到多个初始特征,包括:

5.根据权利要求4所述的方法,其特征在于,所述对各所述关键点查询特征进行处理,得到各所述初始特征,包括:

6.根据权利要求5所述的方法,其特征在于,各所述初始特征集成在初始特征集中,在所述将所述第二信息融合层的输出结果输入至第五线性层以对所述关键点查询特征中至少部分维度进行扩展之后,所述方法还包括:

7.根据权利要求4所述的方法,其特征在于,在所述将关键点初始化特征与所述图像特征进行融合,得到关键点查询特征之前,所述方法还包括:

8.根据权利要求7所述的方法,其特征在于,在所述将所述图像特征输入至线性层,得到各所述多尺度特征图的分类分数之前,所述方法还包括:

9.根据权利要求4所述的方法,其特征在于,在所述将关键点初始化特征与所述图像特征进行融合,得到关键点查询特征之后,所述方法还包括:

10.根据权利要求9所述的方法,其特征在于,各目标对象的姿态包括多个关键点的位置,在所述对各所述目标姿态特征进行姿态解码,分别得到所述目标图像中各目标对象的姿态之后,所述方法还包括:

11.根据权利要求1至3中任意一项所述的方法,其特征在于,所述对各所述目标姿态特征进行姿态解码,分别得到所述目标图像中各目标对象的姿态的步骤由姿态解码器执行,所述方法还包括对所述姿态解码器的第一训练步骤,所述第一训练步骤包括;

12.根据权利要求11所述的方法,其特征在于,所述姿态估计方法由姿态估计模型执行,所述姿态解码器为所述姿态估计模型的组成部分,在对所述姿态解码器进行训练之后,所述方法还包括对所述姿态估计模型中除了所述姿态解码器之外的结构的第二训练步骤,所述第二训练步骤包括:

13.根据权利要求12所述的方法,其特征在于,所述方法还包括:

14.一种电子设备,其特征在于,包括存储器和处理器,所述处理器用于执行所述存储器中存储的程序指令,以实现权利要求1至13任一项所述的方法。

15.一种计算机可读存储介质,其上存储有程序指令,其特征在于,所述程序指令被处理器执行时实现权利要求1至13任一项所述的方法。


技术总结
本申请公开了一种姿态估计方法、电子设备以及存储介质,姿态估计方法包括:获取目标图像,目标图像中包括一个或多个目标对象;对目标图像进行特征提取,得到多个初始特征;将多个初始特征与姿态特征库中的各姿态特征进行匹配,确定与各初始特征匹配的目标姿态特征,其中,姿态特征库中包括多个姿态特征,至少部分姿态特征的组合对应一种姿态;对各目标姿态特征进行姿态解码,分别得到目标图像中各目标对象的姿态。上述方案,能够实现对图像中目标对象的姿态估计。

技术研发人员:徐珊珊,张海涛,马子昂
受保护的技术使用者:杭州华橙软件技术有限公司
技术研发日:
技术公布日:2024/5/29
转载请注明原文地址:https://win.8miu.com/read-1157287.html

最新回复(0)