鲁棒顺序 DeepFake 检测

💡 原文中文,约800字,阅读约需2分钟。
📝

内容提要

该文介绍了 Seq-DeepFake 检测问题及其数据集,作者构建了 Seq-DeepFake-P 数据集以更好地反映真实世界的深度伪造数据分布。作者设计了 SeqFakeFormer++ 模型用于更强大的 Seq-DeepFake 检测。

🎯

关键要点

  • 当前人脸操作技术能够轻松生成逼真的假脸,潜在的恶意滥用引起广泛关注。
  • 现有方法只专注于检测单步人脸操作,无法应对多步操作带来的新威胁。
  • 提出了检测顺序深度伪造操纵 (Seq-DeepFake) 的新研究问题。
  • Seq-DeepFake 检测需要正确预测一系列面部操作的顺序向量。
  • 构建了第一个 Seq-DeepFake 数据集,包含顺序操纵的面部图像及其操作向量注释。
  • 将 Seq-DeepFake 检测转化为图像到序列的任务,提出了 Seq-DeepFake Transformer (SeqFakeFormer)。
  • 在原始数据集上应用各种扰动,构建了更具挑战性的 Seq-DeepFake-P 数据集。
  • 设计了 SeqFakeFormer++ 模型,以增强 Seq-DeepFake 检测的图像与序列之间的对应关系。
➡️

继续阅读