首页|基于多层级语言特征融合的中文文本可读性分级模型

基于多层级语言特征融合的中文文本可读性分级模型

扫码查看
中文文本可读性分级任务的目标是将中文文本按照其可读性划分到相应的难度等级.近年来研究表明,语言特征与深度语义特征在表征文章难度上体现出互补性.但已有的工作仅对两类特征进行浅层融合,尚未考虑将语言特征和深度模型进行深层、多层级融合.因此,该文在基于BERT的传统文本可读性分级模型的基础上,设计多层级语言特征融合方法,考虑到不同语言特征和网络层结构的交互,将汉字、词汇和语法的语言特征与模型的嵌入层和自注意力层进行融合.实验结果显示,该文的方法在中文文本可读性分级任务上的效果超过了所有基线模型,并在测试集上达到94.2%的准确率.
Chinese Text Readability Grading via Multi-level Linguistic Feature Fusion
The goal of Chinese text readability grading task is to classify Chinese texts into the appropriate difficulty levels for readers.Recent studies have shown that linguistic features and deep semantic features are complementary in characterizing the difficulty of text.However,existing work only performed shallow fusion of these two types of features,and deep,multi-level fusion has not been considered.Therefore,this paper develops a multi-level lin-guistic feature fusion strategy based on the traditional text readability grading model on BERT.Specifically,consid-ering the interaction of different linguistic features and network layer structures,this paper fused the linguistic fea-tures of characters,words and grammar in the embedding layer as well as the self-attention layer.The experimental results show that the proposed method outperforms all baseline models and by 94.2%accuracy.

Chinese text readability gradingmulti-level linguistic feature fusiondeep model

谭可人、兰韵诗、张杨、丁安琪

展开 >

华东师范大学数据科学与工程学院,上海 200333

华东师范大学国际汉语文化学院,上海 200333

中文文本可读性分级 多层级特征融合 深度模型

国家自然科学基金教育部语合中心重点项目教学资源建设重点项目华东师范大学新中文教育专项课题华东师范大学新中文教育专项课题

6213700121YH21BYHJC22ZD0672022ECNU-WHCCYJ-292022ECNU-WHCCYJ-31

2024

中文信息学报
中国中文信息学会,中国科学院软件研究所

中文信息学报

CSTPCDCHSSCD北大核心
影响因子:0.8
ISSN:1003-0077
年,卷(期):2024.38(5)
  • 11