首页|基于手部姿态识别的MIDI体感交互系统设计

基于手部姿态识别的MIDI体感交互系统设计

扫码查看
原文链接
  • 万方数据
  • 维普
为摆脱MIDI音乐设备在交互方式上的限制,同时针对目前体感交互系统便携性差、价格昂贵等问题,将边缘计算设备与轻量级网络结合,提出了一种基于手部姿态识别的音乐体感交互系统.系统上位机依托于树莓派4b,通过单目摄像头获取数据进而识别手部关键点,调用舵机追踪目标,并通过nRF24L01通信模块将动作指令发送给下位机,从而实现中远距离控制音乐演奏.通过在轻量级网络ShuffleNet v2中嵌入SENet通道注意力机制并进行网络瘦身操作,系统可在200 ms内完成体感控制任务,能满足用户手势控制、设备协同等需求.
Design of MIDI Somatosensory Interaction System based on Hand Posture Recognition

周祺、张帅

展开 >

湖北工业大学工业设计学院,湖北 武汉430068

MIDI 树莓派 手势识别 ShuffleNet v2 体感交互

2023

湖北工业大学学报
湖北工业大学

湖北工业大学学报

CHSSCD
影响因子：0.258
ISSN：1003-4684
年,卷(期)：2023.38(2)
  • 1