中文信息学报2024,Vol.38Issue(6) :151-160.

一种不确定模态缺失的多模态对抗虚假新闻检测框架

A Multi-modal Adversarial Framework for Fake News Detection under Uncertain Missing Modalities

张永成 魏小梅 王欢 徐荣康
中文信息学报2024,Vol.38Issue(6) :151-160.

一种不确定模态缺失的多模态对抗虚假新闻检测框架

A Multi-modal Adversarial Framework for Fake News Detection under Uncertain Missing Modalities

张永成 1魏小梅 1王欢 1徐荣康1
扫码查看

作者信息

  • 1. 华中农业大学信息学院,湖北武汉 430070;湖北省农业大数据工程技术研究中心,湖北武汉 430070
  • 折叠

摘要

当前虚假新闻的检测方法已经从传统的单一模态数据分析转向了多模态数据融合技术的应用.然而现有的多模态虚假新闻检测方法未充分考虑到现实场景中可能存在的模态缺失问题.模态的缺失可能会导致无法完整地抽取和融合新闻特征,从而降低模型的性能.该文提出一种新的虚假新闻检测框架,该框架在多模态特征学习中,加入了一个模态鉴别器,其在与特征生成器进行对抗训练的过程中学习不同模态组合之间的迁移特征,实现了在不确定模态缺失场景下的虚假新闻检测.通过在真实数据集上进行实验证明,该文所提出的框架在不确定模态缺失场景下优于最新的多模态虚假新闻检测方法.

Abstract

The current fake news detection method have shifted from the single-modal data to the multi-modal data.To deal with the missing modality problem that may exist in real-world scenarios,this paper proposes a new fake news detection framework with a modality discriminator for the multi-modal feature learning.It learns the transfer-ring features between different modality combinations in the process of adversarial training with the feature genera-tor.Transferring features enable fake news detection under uncertain missing modalities.Experiments on real data-sets demonstrate that the proposed framework outperforms state-of-the-art multi-modal fake news detection methods under uncertain missing modalities.

关键词

虚假新闻检测/多模态对抗学习/不确定模态缺失

Key words

fake news detection/multi-modal adversarial learning/uncertain missing modalities

引用本文复制引用

基金项目

国家自然科学基金(62006089)

出版年

2024
中文信息学报
中国中文信息学会,中国科学院软件研究所

中文信息学报

CSTPCDCSCDCHSSCD北大核心
影响因子:0.8
ISSN:1003-0077
参考文献量31
段落导航相关论文