计算机技术与发展2023,Vol.33Issue(2) :38-43.DOI:10.3969/j.issn.1673-629X.2023.02.006

基于多模态融合的室内人体跟踪技术研究

Research on Indoor Human Tracking Technology Based on Multi-modal Fusion

于翔 周波
计算机技术与发展2023,Vol.33Issue(2) :38-43.DOI:10.3969/j.issn.1673-629X.2023.02.006

基于多模态融合的室内人体跟踪技术研究

Research on Indoor Human Tracking Technology Based on Multi-modal Fusion

于翔 1周波1
扫码查看

作者信息

  • 1. 东南大学 自动化学院,江苏 南京 210096
  • 折叠

摘要

传统的室内人体跟踪一般基于单独的相机或者二维激光雷达进行,基于二维点云的人腿检测在面对桌/椅腿较多的环境时准确度明显不足,而基于图像的人体检测在室内光线较暗时也会出现鲁棒性不足的问题,这些单模态的方法往往难以在干扰嘈杂的环境工作.因此,该文提出了一种基于多模态融合的室内人体跟踪方法,训练一个Adaboost分类器将点云段分为人腿/非人腿,使用成熟的YOLOv3网络对图像中的人体进行检测,结合点云段分类结果和视觉人体边界框完成基于概率数据关联的模态融合,最后使用扩展卡尔曼滤波器完成人体跟踪.对该方法在嘈杂的实验室环境下和晦暗的走廊环境下进行测试,结果表明多模态融合的室内人体检测取得了优于单模态的效果,验证了该系统的鲁棒性和有效性,适用于移动机器人的室内人体跟踪任务.

关键词

移动机器人/多模态融合/室内人体跟踪/人体检测/数据关联

引用本文复制引用

基金项目

国家自然科学基金(62073075)

出版年

2023
计算机技术与发展
陕西省计算机学会

计算机技术与发展

CSTPCD
影响因子:0.621
ISSN:1673-629X
参考文献量3
段落导航相关论文