本发明属于图像处理与模式识别领域，具体涉及了一种基于跨模态转化辅助的人脸防伪检测方法、系统及装置，旨在解决仅配备RGB摄像头的条件下无法利用IR模态辅助进行人脸检测，导致检测性能低的问题。本发明包括：对输入图像进行人脸检测、图像裁剪；采用改进的CycleGAN通过RGB与IR模态训练样本对进行人脸模态转换单元的训练，并将输入图像转换为IR图像；通过RGB与IR模态训练样本对和样本标签进行人脸防伪检测模型的训练，并结合输入图像和IR图像计算输入图像属于真实人脸的概率；概率大于设定阈值的为真实人脸图像，否则为攻击图像。本发明利用IR模态更具判别的防伪信息辅助RGB样本的学习，并且IR模态仅参与训练阶段，模型进行人脸防伪检测准确率高，成本低。
NSTL
万方数据
