重庆理工大学学报2021，Vol.35Issue(2) ：144-151.DOI:10.3969/j.issn.1674-8425(z).2021.02.019

基于DTW和CNN的仿真驾驶手势识别及交互

Hand Gesture Recognition and Interaction in Simulation Driving Based on DTW and CNN

杨尊俭 张淑军
重庆理工大学学报2021，Vol.35Issue(2) ：144-151.DOI:10.3969/j.issn.1674-8425(z).2021.02.019
✕
  • 国家科技期刊平台
  • NETL
  • NSTL
  • 万方数据

基于DTW和CNN的仿真驾驶手势识别及交互

Hand Gesture Recognition and Interaction in Simulation Driving Based on DTW and CNN

杨尊俭 1张淑军1
扫码查看

作者信息

  • 1. 青岛科技大学 信息科学技术学院,山东 青岛 266061
  • 折叠

摘要

研究仿真驾驶中的手势识别及自动交互,利用Kinect空间编码技术提取人体运动关节信息,采用DTW与深度学习相结合的方法进行手势识别.提出了一种加权的DTW算法,对提取的骨架信息进行分析,实现对连续手势实时的粗粒度识别;对手部信息,通过关节点计算提取ROI,利用7层CNN网络对ROI信息进行特征提取并得到手部行为的细粒度识别.利用Unity3 D对驾驶场景进行仿真,虚拟环境与用户手势实时交互,实验结果真实有效.

关键词

手势识别/虚实交互/深度学习/动态时间规整

引用本文复制引用

基金项目

山东省重点研发计划项目(2017 GGX10127)

出版年

2021
重庆理工大学学报
重庆理工大学

重庆理工大学学报

CSTPCD北大核心
影响因子：0.567
ISSN：1674-8425
被引量4
参考文献量6
段落导航相关论文