福建质量管理2020,Issue(19) :271-274.

基于自注意力机制Bi-LSTM的中文短文本情感分析

陶怡轩
福建质量管理2020,Issue(19) :271-274.

基于自注意力机制Bi-LSTM的中文短文本情感分析

陶怡轩1
扫码查看

作者信息

  • 1. 西北民族大学中国民族信息技术研究院 甘肃 兰州 730000
  • 折叠

摘要

短文本的情感分析用于判断文本的极性,传统的循环神经网络(RNN)无法解决长期依赖以及梯度消失等问题,引入长短期记忆(LSTM)就是在RNN的基础上,增加了对过去状态的过滤,从而选择哪些状态对当前更有影响,而不是简单的选择最近的状态.利用LSTM对句子建模存在无法处理双向的时间序列,通过Bi-LSTM能够更好的捕捉双向的语义依赖.首先对短文本进行单词的向量化表示,其次对提出短文本情感分析在融合多任务学习网络上,如何结合不同的深度学习网络进行归纳和探究;利用自注意力机制动态调整特征权重,自注意力机制可以减少外部参数的依赖,经过SoftMax分类器得到情感类别,让模型学到更多的文本自身上下文特征,模型的准确率、召回率、F1值分别提高了1.94%,1.04%,1.00%.

关键词

情感分析/自注意力机制/循环神经网络/双向长短时记忆

引用本文复制引用

出版年

2020
福建质量管理
福建省质量管理协会

福建质量管理

ISSN:
参考文献量4
段落导航相关论文