基于Mediapipe的人体姿态跟随机器人系统的设计与实现
Design and Implementation of a Mediapipe Based Human Posture Following Robot System
张华锐 1赵潇帆 1王苑丞 1吕行 1彭熙2
作者信息
- 1. 华中师范大学 计算机学院,湖北 武汉 430079
- 2. 华中师范大学 计算机学院,湖北 武汉 430079;湖北省人工智能与智慧学习重点实验室,湖北 武汉 430079;湖北省高等学校计算机基础实验教学示范中心,湖北 武汉 430079
- 折叠
摘要
本研究的机器人系统采用计算机视觉对人体姿态进行动态标识,从现有的单目相机获得图像或视频,利用Mediapipe方法对32个人体关键部位进行了定位和可信度的测量.控制系统通过反馈关节位置标记进行人机关节映射,控制驱动元件复现人体实时自然交互,实现人体跟随的功能.该系统的随机实验结果证明了系统设计的正确性和可行性,这对人体姿态跟随机器人系统的仿真研究有一定的指导作用.
Abstract
The robotic system in this study uses computer vision to dynamically mark human posture,obtains images or videos from existing monocular cameras,and uses the Mediapipe method to localize and plausibly measure 32 key human body parts.The control system performs human body joint mapping by feedback joint position markers and controls the drive elements to reproduce the real time natural interaction of the human body and the function of real human body following.The stochastic experimental results of the system prove the correctness and feasibility of the system design,which is a guideline for the simulation study of human posture following robot system.
关键词
Mediapipe/人体姿态识别/机器人/自动跟随Key words
Mediapipe/human posture recognition/robot/automatic following引用本文复制引用
基金项目
华中师范大学大学生创新创业训练计划项目(202210511022)
华中师范大学大学生创新创业训练计划项目(202210511023)
出版年
2024