摘要: 现有深度伪造人脸检测方法多依赖训练集中已有的伪造模式,如噪声或局部纹理,因此在应对复杂未知伪造样本时泛化能力不足.针对该问题,基于RECCE(reconstructionclassification learning)网络提出一种多损失融合的伪造人脸检测框架.该方法引入原型相似度机制,通过度量输入特征与类别原型的距离,提高对未知伪造的识别能力;并构建由原型损失、二元交叉熵损失、重建损失和度量学习损失组成的联合损失,以多角度增强伪造特征表达.对编码器多层级特征进行融合,引入重建差异引导的注意力机制,使模型聚焦伪造区域,提高检测准确率(Acc)与鲁棒性.实验在多个基准数据集上与6种方法比较表明,该方法训练效率提升显著,仅为RECCE的28%.在FaceForensics++(c40)上训练并在CelebDF上跨域测试时,曲线下面积(AUC)提升1.48%.较现有方法具有更优性能和泛化能力.
中图分类号:
. 基于多损失融合的深度伪造人脸检测方法[J]. 信息安全研究, 2026, 12(7): 634-643.
| [1]国家互联网信息办公室, 工业和信息化部, 公安部, 等. 人工智能生成合成内容标识办法[EBOL]. (20250307) [20251107]. https:www.gov.cnzhengcezhengceku202503content_7014286.htm[2]Dang H, Feng L, Stehouwer J, et al. On the detection of digital face manipulation[C] Proc of the IEEECVF Conf on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE, 2020: 57815790[3]张煜之, 王锐芳, 朱亮, 等. 深度伪造生成和检测技术综述[J]. 信息安全研究, 2022, 8(3): 258269[4]Cao J, Ma C, Yao T, et al. Endtoend reconstructionclassification learning for face forgery detection[C] Proc of the IEEECVF Conf on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE, 2022: 41034112[5]Snell J, Swersky K, Zemel R S. Prototypical networks for fewshot learning[C] Proc of the 31st Int Conf on Neural Information Processing Systems. New York: NIPS, 2017: 40774087[6]Chen Z, Sun K, Zhou Z, et al. DiffusionFace: Towards a comprehensive dataset for diffusionbased face forgery analysis[J]. arXiv preprint, arXiv:2403.18471, 2024[7]Chollet F. Xception: Deep learning with depthwise separable convolutions[C] Proc of the IEEE Conf on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE, 2017: 12511258[8]Rossler A, Cozzolino D, Verdoliva L, et al. FaceForensics++: Learning to detect manipulated facial images[C] Proc of the IEEECVF Int Conf on Computer Vision. Piscataway, NJ: IEEE, 2019: 111[9]Li Y, Yang X, Sun P, et al. CelebDF: A largescale challenging dataset for DeepFake forensics[C] Proc of the IEEECVF Conf on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE, 2020: 32043213[10]Zi B, Chang M, Chen J, et al. WildDeepfake: A challenging realworld dataset for DeepFake detection[C] Proc of the 28th ACM Int Conf on Multimedia. New York: ACM, 2020: 23822390[11]Loshchilov I, Hutter F. Decoupled weight decay regularization[J]. arXiv preprint, arXiv:1711.05101, 2017[12]Wang Chengrui, Deng Weihong. Representative forgery mining for fake face detection[C] Proc of the IEEECVF Conf on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE, 2021: 1492314932[13]Qian Y, Yin G, Sheng L, et al. Thinking in frequency: Face forgery detection by mining frequencyaware clues[C] Proc of the European Conf on Computer Vision. Berlin: Springer, 2020: 86103[14]Zhao H, Zhou W, Chen D, et al. MultiAttentional DeepFake detection[C] Proc of the IEEECVF Conf on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE, 2021: 21852194[15]Van der Maaten L, Hinton G. Visualizing data using tSNE[J]. Journal of Machine Learning Research, 2008 (9): 25792605[16]Selvaraju R R, Cogswell M, Das A, et al. GradCAM: Visual explanations from deep networks via gradientbased localization[C] Proc of the IEEE Conf on Computer Vision and Pattern Recognition. Piscataway, NJ: IEEE, 2017: 618626 |
| [1] | 程宇航, 尚涛, 姜亚彤, 杜瑞忠, . 基于自适应裁剪的深度学习差分隐私保护方案[J]. 信息安全研究, 2026, 12(6): 490-. |
| [2] | 陈先意, 王晶, 刘腾骏, 郭倩彬, 杨森, . 基于频域注入的动态隐蔽后门攻击[J]. 信息安全研究, 2026, 12(6): 510-. |
| [3] | 梅锦程, 张平, 赖富豪, 吴礼发, . 基于新型组合混沌系统和分数数论变换的 图像加密方法[J]. 信息安全研究, 2026, 12(6): 517-. |
| [4] | 谢绒娜, 吴煦雯, 王都和, 祝浩宣, . 基于多层敏感分析的个性化差分隐私数据发布方法[J]. 信息安全研究, 2026, 12(6): 542-. |
| [5] | 瞿淼樟, 师智斌, 常赵宇, 张薇, . 基于图神经网络和多特征融合的有害网站检测研究[J]. 信息安全研究, 2026, 12(5): 420-. |
| [6] | 左珮良, 付成龙, 缪宸硕, 刘学文, 李伟麟, 刘博雅, . 基于CSI特征的异构执行体动态调度算法[J]. 信息安全研究, 2026, 12(5): 428-. |
| [7] | 李开颜, 贾洪勇, 曾俊杰, 张建辉, . 全同态加密CNN推理的内存与噪声协同优化方法[J]. 信息安全研究, 2026, 12(5): 439-. |
| [8] | 李远海, 翟岩, 李小波, . 数字平台个人信息安全风险的生成逻辑与应对策略[J]. 信息安全研究, 2026, 12(5): 445-. |
| [9] | 李嘉澄, 曹雷, 徐松艳, . MLKEM算法的高性能硬件架构设计与实现[J]. 信息安全研究, 2026, 12(5): 452-. |
| [10] | 朱顺哲, 钮可, 卢艺航, 徐千惠, 李军, . 基于多尺度卷积注意力和双分支对抗训练的抗压缩鲁棒视频水印[J]. 信息安全研究, 2026, 12(5): 463-. |
| [11] | 李天峰, 谭丰隆, 王秉, 陈婧, . 我国网络信息安全政策的制度框架和规则特征[J]. 信息安全研究, 2026, 12(5): 474-. |
| [12] | 国强, 黄卉, 禄雨辰, . 零信任战略的实施路径研究[J]. 信息安全研究, 2026, 12(5): 483-. |
| [13] | 孙璇, 李彩霞, 李军, 任亚唯, 代海英, 余果, 周昊, . 基于改进双向TCN模型的SDN异常流量检测[J]. 信息安全研究, 2026, 12(4): 303-. |
| [14] | 李晓东, 窦一萌, 官里, 赵若云, 岳浩, . 一种基于混淆模分量的全同态加密算法研究[J]. 信息安全研究, 2026, 12(4): 311-. |
| [15] | 马自强, 孟誉卓, 魏良根, 王名宇, 张娟洋, . 针对wNAF实现ECDSA的格攻击研究[J]. 信息安全研究, 2026, 12(4): 319-. |
| 阅读次数 | ||||||
|
全文 |
|
|||||
|
摘要 |
|
|||||