光电子·激光2022,Vol.33Issue(12) :1306-1314.DOI:10.16136/j.joel.2022.12.0101

基于时空多特征融合网络的三维人体姿态估计

Three-dimensional human pose estimation based on spatio-temporal multi-feature fusion network

叶俊 张云
光电子·激光2022,Vol.33Issue(12) :1306-1314.DOI:10.16136/j.joel.2022.12.0101

基于时空多特征融合网络的三维人体姿态估计

Three-dimensional human pose estimation based on spatio-temporal multi-feature fusion network

叶俊 1张云2
扫码查看

作者信息

  • 1. 云南省计算机应用重点实验室,云南昆明650500
  • 2. 云南省计算机应用重点实验室,云南昆明650500;昆明理工大学信息工程与自动化学院,云南昆明650500
  • 折叠

摘要

目前,常见的三维(3D)人体姿态估计算法在表征学习上取得很好的效果,但是在人体骨架关节点处依然存在估计精度不佳等问题,因此,如何从单目RGB图像中利用冗余的二维(2D)姿态序列时空信息来估计人体姿态的有效方式是一个研究的难点.本文提出一种基于时空多特征融合网络的三维人体姿态估计算法,具体是结合一种图像外观信息和运动时序信息时空多特征融合层级方法,该方法利用一种紧凑的卷积神经网络(convolutional neural network,CNN)学习时空信息将二维关节点位置信息建模为三维关节点位置.实验结果表明,本文所提出的方法能实现较为先进的端对端姿态估计精度,而且不需要任何后处理阶段的姿态优化方法,本文得到的姿态估计在平均精度上得到有效的提升,证明本文方法能够有效提高人体姿态估计的准确性.

关键词

三维人体姿态估计/时空特征/运动补偿网络/特征融合网络

引用本文复制引用

基金项目

国家自然科学基金(61262043)

云南省科技计划(2011FZ029)

国家重点实验室开放基金(2020106)

出版年

2022
光电子·激光
天津理工大学 中国光学学会

光电子·激光

CSCD北大核心
影响因子:1.437
ISSN:1005-0086
被引量1
参考文献量19
段落导航相关论文