首页|基于骨架关键关节构建时空金字塔模型的人体行为识别

基于骨架关键关节构建时空金字塔模型的人体行为识别

扫码查看
针对当前骨骼数据信噪比低及特征信息不足的问题,提出人体关键关节构建时空金字塔模型的动作识别方法。该算法利用人体骨架关键关节构建空间域金字塔特征,保留骨架铰链系统的空间结构;利用多层级叠加协方差,构建时序金字塔特征,解决需要预处理视频序列长度的问题。在MSR-Action3D和UTKinect数据集上的实验结果表明,该方法准确率高、实时性好,可广泛应用于行为识别的各个领域。
HUMAN ACTION RECOGNITION BASED ON MOST INFORMATIVE JOINTS OF SKELETON AND SPATIO-TEMPORAL PYRAMID
Aiming at the problems of low signal-to-noise ratio and insufficient feature information of current bone data,this paper applies a human action recognition method combining most informative joints with spatiotemporal pyramid.It extracted most informative joints of the human skeleton to construct spatial domain pyramid features,and used multi-level superimposed covariance to construct temporal pyramid features,which not only preserved the spatial structure of the skeleton hinge system,but also solved the problem of preprocessing the length of the video sequence.Experimental results on the MSR-Action3D and UTKinect dataset show that the method has high accuracy and good real-time performance,and can be widely applied in various fields of behavior recognition.

Human action recognition3D skeleton sequenceSpatio-temporal pyramidMost informative joint

司宇航、周天彤、冯珂垚

展开 >

常州大学信息科学与工程学院 江苏常州 213164

中国科学院智能红外感知重点实验室 上海 200083

中国科学院上海技术物理研究所 上海 200083

人体行为识别 3D骨骼数据 时空金字塔模型 关键关节

江苏省科技厅社会发展项目江苏省"333高层次人才培养工程"项目常州市社会发展项目江苏省教育厅首批中外合作办学平台联合科研项目浙江省脑机协同智能重点实验室开放基金资助项目

BE2018638CE201950252020E10010-04

2024

计算机应用与软件
上海市计算技术研究所 上海计算机软件技术开发中心

计算机应用与软件

CSTPCD北大核心
影响因子:0.615
ISSN:1000-386X
年,卷(期):2024.41(1)
  • 4