计算机技术与发展2023,Vol.33Issue(10) :93-100.DOI:10.3969/j.issn.1673-629X.2023.10.015

基于MRC和ERNIE的有色冶金命名实体识别模型

Nonferrous Metallurgical Named Entity Recognition Model Based on MRC and ERNIE

贵向泉 郭亮 李立
计算机技术与发展2023,Vol.33Issue(10) :93-100.DOI:10.3969/j.issn.1673-629X.2023.10.015

基于MRC和ERNIE的有色冶金命名实体识别模型

Nonferrous Metallurgical Named Entity Recognition Model Based on MRC and ERNIE

贵向泉 1郭亮 1李立1
扫码查看

作者信息

  • 1. 兰州理工大学 计算机与通信学院,甘肃 兰州 730050
  • 折叠

摘要

命名实体是构建产业企业画像和产业知识图谱的重要依据,为解决现有方法在有色冶金领域命名实体识别任务当中无法充分提取文本语义特征、没有充分利用标签当中的先验知识和嵌套命名实体识别效果不佳的问题,提出了一种基于机器阅读理解框架(MRC)和知识增强语义表示模型(ERNIE)的MEAB(MRC-ERNIE-Attention-BiLSTM)模型结构.该模型在MRC框架的基础上,引入了基于Attention的信息融合策略,将两种不同结构的数据在ERNIE预训练模型进行特征提取之后转换为向量,并在信息融合层进行向量融合,使模型能够学习到标签当中的先验知识.随后BiLSTM模型对具有语义信息的向量从两个方向进行特征提取,并在一种多层嵌套命名实体识别器中进行输出,提高了嵌套命名实体的识别准确率.在构建的有色冶金领域命名实体识别数据集上的实验表明,MEAB模型的精确率、召回率和F1 值分别达到了78.77%、79.76%和79.26%,证明了该模型的有效性.

关键词

有色冶金产业/自然语言处理/命名实体识别/MRC/ERNIE

Key words

nonferrous metallurgy industry/natural language processing/named entity recognition/machine reading comprehension/enhanced representation through knowledge integration

引用本文复制引用

基金项目

国家重点研发计划(2020YFB1713600)

出版年

2023
计算机技术与发展
陕西省计算机学会

计算机技术与发展

CSTPCD
影响因子:0.621
ISSN:1673-629X
被引量1
参考文献量2
段落导航相关论文