首页|基于LDA和BiGRU的文本分类

基于LDA和BiGRU的文本分类

扫码查看
文本分类是自然语言处理的基础任务,文本中的特征稀疏性和提取特征所用的神经网络影响后续的分类效果.针对文本中的特征信息不足以及传统模型上下文依赖关系方面不足的问题,提出经过TF-IDF加权的词向量和LDA主题模型相融合,利用双向门控循环神经网络层(BiGRU)充分提取文本深度信息特征的分类方法.该方法主要使用的数据集是天池比赛新闻文本分类数据集,首先用Word2vec和LDA模型分别在语料库中训练词向量,Word2vec经过TF-IDF进行加权所得的词向量再与LDA训练的经过最大主题概率扩展的词向量进行简单拼接,拼接后得到文本矩阵,将文本矩阵输入到BiGRU神经网络中,分别从前后两个反方向提取文本深层次信息的特征向量,最后使用softmax函数进行多分类,根据输出的概率判断所属的类别.与现有的常用文本分类模型相比,准确率、F1值等评价指标都有了较高的提升.
Text Classification Based on LDA and BiGRU

冼广铭、王鲁栋、曾碧卿、梅灏洋、陶睿

展开 >

华南师范大学 软件学院,广东 佛山 528225

LDA主题模型 BiGRU Word2vec 深度学习 文本分类

国家自然科学基金广东省普通高校人工智能重点领域专项

618760672019KZDZX1033

2022

计算机技术与发展
陕西省计算机学会

计算机技术与发展

CSTPCD
影响因子:0.621
ISSN:1673-629X
年,卷(期):2022.32(4)
  • 3
  • 12