深度伪造与检测技术综述

被引:95
作者
李旭嵘 [1 ,2 ]
纪守领 [1 ]
吴春明 [1 ,3 ]
刘振广 [4 ]
邓水光 [1 ]
程鹏 [5 ]
杨珉 [6 ]
孔祥维 [7 ]
机构
[1] 浙江大学计算机科学与技术学院
[2] 阿里巴巴
[3] 之江实验室
[4] 浙江工商大学计算机与信息工程学院
[5] 浙江大学控制科学与工程学院
[6] 复旦大学计算机科学技术学院
[7] 浙江大学管理学院
基金
浙江省自然科学基金; 国家重点研发计划;
关键词
深度学习; 深度伪造; 假视频; 取证; 检测技术;
D O I
暂无
中图分类号
TP391.41 [];
学科分类号
摘要
深度学习在计算机视觉领域取得了重大成功,超越了众多传统的方法.然而近年来,深度学习技术被滥用在假视频的制作上,使得以Deepfakes为代表的伪造视频在网络上泛滥成灾.这种深度伪造技术通过篡改或替换原始视频的人脸信息,并合成虚假的语音来制作色情电影、虚假新闻、政治谣言等.为了消除此类伪造技术带来的负面影响,众多学者对假视频的鉴别进行了深入的研究,并提出一系列的检测方法来帮助机构或社区去识别此类伪造视频.尽管如此,目前的检测技术仍然存在依赖特定分布数据、特定压缩率等诸多的局限性,远远落后于假视频的生成技术.并且不同学者解决问题的角度不同,使用的数据集和评价指标均不统一.迄今为止,学术界对深度伪造与检测技术仍缺乏统一的认识,深度伪造和检测技术研究的体系架构尚不明确.回顾了深度伪造与检测技术的发展,并对现有研究工作进行了系统的总结和科学的归类.最后讨论了深度伪造技术蔓延带来的社会风险,分析了检测技术的诸多局限性,并探讨了检测技术面临的挑战和潜在研究方向,旨在为后续学者进一步推动深度伪造检测技术的发展和部署提供指导.
引用
收藏
页码:496 / 518
页数:23
相关论文
共 20 条
[1]
一种基于双流网络的Deepfakes检测技术 [J].
李旭嵘 ;
于鲲 .
信息安全学报, 2020, 5 (02) :84-91
[2]
Deep video portraits[J] Hyeongwoo Kim;Pablo Carrido;Ayush Tewari;Weipeng Xu;Justus Thies;Matthias Niessner;Patrick Pérez;Christian Richardt;Michael Zollhöfer;Christian Theobalt ACM Transactions on Graphics (TOG) 2018,
[3]
Headon[J] Justus Thies;Michael Zollhöfer;Christian Theobalt;Marc Stamminger;Matthias Niessner ACM Transactions on Graphics (TOG) 2018,
[4]
State of the Art on Monocular 3D Face Reconstruction; Tracking; and Applications[J] M. Zollhöfer;J. Thies;P. Garrido;D. Bradley;T. Beeler;P. Pérez;M. Stamminger;M. Nießner;C. Theobalt Computer Graphics Forum 2018,
[5]
Bringing portraits to life[J] Hadar Averbuch-Elor;Daniel Cohen-Or;Johannes Kopf;Michael F. Cohen ACM Transactions on Graphics (TOG) 2017,
[6]
Synthesizing Obama[J] Supasorn Suwajanakorn;Steven M. Seitz;Ira Kemelmacher-Shlizerman ACM Transactions on Graphics (TOG) 2017,
[7]
Real-time expression transfer for facial reenactment[J] Justus Thies;Michael Zollhöfer;Matthias Nießner;Levi Valgaerts;Marc Stamminger;Christian Theobalt ACM Transactions on Graphics (TOG) 2015,
[8]
VDub: Modifying Face Video of Actors for Plausible Visual Alignment to a Dubbed Audio Track[J] P. Garrido;L. Valgaerts;H. Sarmadi;I. Steiner;K. Varanasi;P. Pérez;C. Theobalt Computer Graphics Forum 2015,
[9]
Video face replacement[J] Kevin Dale;Kalyan Sunkavalli;Micah K. Johnson;Daniel Vlasic;Wojciech Matusik;Hanspeter Pfister ACM Transactions on Graphics (TOG) 2011,
[10]
Faceapp https://www.faceapp.com 2019,