首页|针对低质量视频的双支流人脸伪造检测方法

针对低质量视频的双支流人脸伪造检测方法

扫码查看
随着人脸伪造技术不断的发展,如今经过伪造后的视频和图片的人脸伪造质量大幅度提升,这对人身安全、财产安全乃至公共安全存在一定的危害性.因此,迫切需要一种有效的检测方法来区分真假人脸.然而,现有的检测方法面对低质量的虚假人脸视频时存在一定的局限性,即面对压缩过后的低质量视频检测性能较差,此外,泛化性能较差,检测准确率有所下降.为了提升检测网络的准确性和泛化性,将语义信息和噪声信息相结合,提出一个双支流网络,在关注图像语义信息的同时通过高频噪声信息展示出伪造区域和真实区域的不一致性.利用高频噪声信息暴露出的不一致性,重点关注图像语义信息中的伪造痕迹.交互模块增进语义信息和高频信息之间的交互性与融合性.在FaceForensics++数据集进行了训练和测试,并在Celeb-DF数据集上评估该模型的跨数据集泛化性能.从实验结果中可以证明该模型的有效性和可靠性.
Double Branch Face Forgery Detection Method for Low Quality Video
Existing detection methods have certain limitations when dealing with low-quality fake facial videos,such as poor detection performance in compressed low-quality videos,poor generalization performance,and a decrease in detection accuracy.In order to improve the accuracy and generalization of the detection network,this paper proposes to combine semantic information and noise information,and proposes a dual tributary network.While focusing on the Semantic informa-tion of the image,this paper can show the inconsistency between the forged area and the real area through high-frequen-cy noise information.The inconsistency exposed by high-frequency noise information focuses on the forgery traces in the image semantic information.It enhance the interactivity and integration between semantic information and high-frequency in-formation through interaction modules.To evaluate,this paper traines and testes the model on the FaceForensics++dataset,and evaluated its cross dataset generalization performance on the Celeb DF dataset.

facial forgerydual tributarieshigh-frequency noiseimage semantics

宋清华、吕东辉、冯国瑞

展开 >

上海大学通信与信息工程学院,上海 200072

人脸伪造 双支流 高频噪声 图像语义

2024

工业控制计算机
中国计算机学会工业控制计算机专业委员会 江苏省计算技术研究所有限责任公司

工业控制计算机

影响因子:0.258
ISSN:1001-182X
年,卷(期):2024.37(1)
  • 12