重庆理工大学学报2022,Vol.36Issue(11) :202-211.DOI:10.3969/j.issn.1674-8425(z).2022.11.024

C-CapsNet:一种异构脑电和眼动双模态的情绪识别模型

C-CapsNet:A bi-modal emotion recognition model based on heterogeneous electroencephalogram and eye movement

马军辉 王峰 王晔 肖家赋 相虎生
重庆理工大学学报2022,Vol.36Issue(11) :202-211.DOI:10.3969/j.issn.1674-8425(z).2022.11.024

C-CapsNet:一种异构脑电和眼动双模态的情绪识别模型

C-CapsNet:A bi-modal emotion recognition model based on heterogeneous electroencephalogram and eye movement

马军辉 1王峰 1王晔 1肖家赋 2相虎生2
扫码查看

作者信息

  • 1. 太原理工大学 信息与计算机学院,太原 030000
  • 2. 中国人民武装警察部队指挥学院,天津 300000
  • 折叠

摘要

情绪识别在人机互动中具有重要作用,针对传统手工特征提取精度高但泛化能力低和使用一种模态情绪识别结果不可靠的问题,通过充分利用脑电信号的空间和时间信息,异构脑电和眼动2种模态,基于卷积神经网络和胶囊网络,提出一种双模态情绪识别模型C-CapsNet.在SEED IV多模态数据集上进行实验:使用5-fold交叉验证方法研究共享矩阵初始化方法、迭代次数和学习率对于C-CapsNet在Valence和Arousal两个维度的平均识别率影响;使用LOO交叉验证方法得到该模型的Valence和Arousal最高准确率分别为91.5%和92.4%,优于其他类似研究的情绪识别模型.

关键词

情绪识别/脑电/眼动/胶囊网络

引用本文复制引用

基金项目

武警部队后勤重大理论与现实问题立项课题()

出版年

2022
重庆理工大学学报
重庆理工大学

重庆理工大学学报

CSTPCD北大核心
影响因子:0.567
ISSN:1674-8425
被引量1
参考文献量33
段落导航相关论文