自动化与仪器仪表2022,Issue(9) :156-160,164.DOI:10.14016/j.cnki.1001-9227.2022.09.156

基于多模态融合的心理测试仪自动评估系统检测研究

Study on the automatic evaluation system of psychological tester based on multimodal fusion

徐端倪 胡智林
自动化与仪器仪表2022,Issue(9) :156-160,164.DOI:10.14016/j.cnki.1001-9227.2022.09.156

基于多模态融合的心理测试仪自动评估系统检测研究

Study on the automatic evaluation system of psychological tester based on multimodal fusion

徐端倪 1胡智林1
扫码查看

作者信息

  • 1. 四川科技职业学院,四川眉山620000
  • 折叠

摘要

针对传统多模态融合模型对心理测评结果准确度不高的问题,提出一种基于注意力机制的心理测试系统.其中,针对采集到的多模态特征信息,包括面部和步态、语音信息等,通过注意力机制对特征权重进行分配,从而实现特征的融合,然后基于以上特征进行SVM识别,并比较融合前后的准确率.结果表明,通过注意力机制进行多模态特征融合后的模型,整体心理测评准确率达82.36%,提升6.45%,测评准确度较高;且针对测评难点人际关系敏感度指标,多模态特征融合后其测评准确率从66.19%提高至78.38%.由此得出,注意力机制的引入可弥补传统多模态融合测评的不足之处,提升改进的融合模型系统的心理测评准确性.

关键词

多模态融合/注意力机制/心理测评/准确率/面部和步态特征

引用本文复制引用

基金项目

出版年

2022
自动化与仪器仪表
重庆工业自动化仪表研究所,重庆市自动化与仪器仪表学会

自动化与仪器仪表

CSTPCD
影响因子:0.327
ISSN:1001-9227
被引量4
参考文献量15
段落导航相关论文