重庆理工大学学报2023,Vol.37Issue(23) :201-209.DOI:10.3969/j.issn.1674-8425(z).2023.12.024

基于结构重参数化和注意力机制的复杂背景下手势识别

Hand gesture recognition in complex background based on structure reparameterization and attention mechanism

杨黎霞 夏天 陈仁祥 张晓 邱天然
重庆理工大学学报2023,Vol.37Issue(23) :201-209.DOI:10.3969/j.issn.1674-8425(z).2023.12.024

基于结构重参数化和注意力机制的复杂背景下手势识别

Hand gesture recognition in complex background based on structure reparameterization and attention mechanism

杨黎霞 1夏天 2陈仁祥 2张晓 2邱天然2
扫码查看

作者信息

  • 1. 重庆科技大学 工商管理学院,重庆 401331
  • 2. 重庆交通大学 交通工程应用机器人重庆市工程实验室,重庆 400074
  • 折叠

摘要

针对复杂背景下手势图像受到干扰较多而导致的手势识别准确率低、识别速度慢问题,提出一种基于结构重参数化和注意力机制的复杂背景下手势识别算法RepSEHGR(re-pa-rameter squeeze-expand hand gesture recognition).通过使用结构重参数化方法,将其应用到残差结构中,在部署阶段去除多余分支结构,提升算法识别速度;同时嵌入通道注意力机制模块,利用其为不同通道特征加权的特点使算法关注手势特征,减少复杂背景干扰;使用cutout与仿射变换2种数据增强方法训练算法,抑制复杂背景噪声输入并增强数据,减少过拟合的同时提升算法健壮性.在一个复杂背景手势数据集上进行对比实验,结果显示:识别精度达到99.9%,识别速度达到200 fps,证明了所提算法的有效性.

关键词

手势识别/注意力机制/复杂背景/结构重参数化/数据增强

Key words

gesture recognition/attention mechanism/complex background/structure reparameterization/data augmentation

引用本文复制引用

基金项目

国家自然科学基金(51975079)

重庆市教委科学技术研究项目(KJZD-M202200701)

重庆市研究生联合培养基地项目(JDLHPYJD2021007)

重庆市专业学位研究生教学案例库(JDALK2022007)

重庆市研究生教育课程思政示范项目(YKCSZ23128)

重庆市研究生科研创新项目(2023S0072)

重庆科技大学科研启动项目(ckre202212030)

出版年

2023
重庆理工大学学报
重庆理工大学

重庆理工大学学报

CSTPCD北大核心
影响因子:0.567
ISSN:1674-8425
参考文献量8
段落导航相关论文