首页|一种不确定模态缺失的多模态对抗虚假新闻检测框架

一种不确定模态缺失的多模态对抗虚假新闻检测框架

扫码查看
当前虚假新闻的检测方法已经从传统的单一模态数据分析转向了多模态数据融合技术的应用。然而现有的多模态虚假新闻检测方法未充分考虑到现实场景中可能存在的模态缺失问题。模态的缺失可能会导致无法完整地抽取和融合新闻特征,从而降低模型的性能。该文提出一种新的虚假新闻检测框架,该框架在多模态特征学习中,加入了一个模态鉴别器,其在与特征生成器进行对抗训练的过程中学习不同模态组合之间的迁移特征,实现了在不确定模态缺失场景下的虚假新闻检测。通过在真实数据集上进行实验证明,该文所提出的框架在不确定模态缺失场景下优于最新的多模态虚假新闻检测方法。
A Multi-modal Adversarial Framework for Fake News Detection under Uncertain Missing Modalities
The current fake news detection method have shifted from the single-modal data to the multi-modal data.To deal with the missing modality problem that may exist in real-world scenarios,this paper proposes a new fake news detection framework with a modality discriminator for the multi-modal feature learning.It learns the transfer-ring features between different modality combinations in the process of adversarial training with the feature genera-tor.Transferring features enable fake news detection under uncertain missing modalities.Experiments on real data-sets demonstrate that the proposed framework outperforms state-of-the-art multi-modal fake news detection methods under uncertain missing modalities.

fake news detectionmulti-modal adversarial learninguncertain missing modalities

张永成、魏小梅、王欢、徐荣康

展开 >

华中农业大学信息学院,湖北武汉 430070

湖北省农业大数据工程技术研究中心,湖北武汉 430070

虚假新闻检测 多模态对抗学习 不确定模态缺失

国家自然科学基金

62006089

2024

中文信息学报
中国中文信息学会,中国科学院软件研究所

中文信息学报

CSTPCDCHSSCD北大核心
影响因子:0.8
ISSN:1003-0077
年,卷(期):2024.38(6)