融合意图列表查询机制的门控槽模型

扫码查看

原文链接

国家科技期刊平台
NETL
NSTL
万方数据
维普

中文摘要：将递归神经网络(RNN)应用于意图检测和槽填充已实现较好的识别效果.传统Slot-Gated模型旨在将意图特征融入槽位识别中,但未能将文本标签信息作为模型先验知识传入模型参与训练.在Slot-Gated模型的基础上,通过意图标签信息构建一种基于注意力机制的意图列表查询模块,并通过全局优化的方法提升模型意图识别以及意图与槽填充联合准确率.通过与Slot-Gated模型进行对比实验,该方法在ATIS数据集上的意图及联合准确率分别提升了1.1％和1.5％;在Snips数据集上,意图及联合准确率分别提升了0.3％和0.4％.实验结果表明,将意图种类标签信息作为先验知识加入训练能提升模型性能.

外文标题：Slot-Gated Modeling with Intent List Selection

作者：

胡光敏、姜黎

展开 >

作者单位：

湘潭大学物理与光电工程学院,湖南湘潭411100

关键词：

自然语言理解神经网络预训练模型槽填充注意力机制

出版年：

2021

DOI：

10.11907/rjdk.202395