Photorealistic image generation has reached a new level of quality due to the breakthroughs of generative adversarial networks (GANs). Yet, the dark side of such deepfakes, the malicious use of generated media, raises concerns about visual misinformation. While existing research work on deepfake detection demonstrates high accuracy, it is subject to advances in generation technologies and the adversarial iterations on detection countermeasure techniques. Thus, we seek a proactive and sustainable solution on deepfake detection, that is agnostic to the evolution of GANs, by introducing artificial fingerprints into the generated images. Our approach first embeds fingerprints into the training data, we then show a surprising discovery on the transferability of such fingerprints from training data to GAN models, which in turn enables reliable detection and attribution of deepfakes. Our empirical study shows that our fingerprinting technique (1) holds for different state-of-the-art GAN configurations, (2) gets more effective along with the development of GAN techniques, (3) has a negligible side effect on the generation quality, and (4) stays robust against image-level and model-level perturbations. Our solution enables the responsible disclosure and regulation of such double-edged techniques and introduces a sustainable margin between real data and deepfakes, which makes this solution independent of the current arms race.


翻译:由于基因对抗网络(GANs)的突破,摄影现实形象的生成达到了一个新的质量水平。然而,这种深假网络的黑暗面,对产生的媒体的恶意使用,引起了对视觉错误信息的担忧。虽然关于深假探测的现有研究工作显示高度精度,但取决于生成技术的进步和探测反措施技术的对抗迭代。因此,我们寻求在深假探测方面采取积极主动和可持续的解决办法,这是对GAN的演进的认知,办法是在生成的图像中引入人工指纹。我们的方法首先在培训数据中嵌入指纹,然后我们以惊人的方式发现这种指纹从培训数据转移到GAN模型的可转移性,这反过来又使得能够可靠地探测和归属深假发现。我们的实证研究表明,我们的指纹技术(1)保持了不同的先进GAN配置,(2)随着GAN技术的发展而更加有效,(3)对生成质量产生微不足道的侧面效应,(4)在图像水平和模型水平上保持稳健。我们的解决办法使得以负责任的方式披露和监管这种现有双重独立武器技术的深度比值。

0
下载
关闭预览

相关内容

生成式对抗网络GAN异常检测
专知会员服务
114+阅读 · 2019年10月13日
【哈佛大学商学院课程Fall 2019】机器学习可解释性
专知会员服务
98+阅读 · 2019年10月9日
【SIGGRAPH2019】TensorFlow 2.0深度学习计算机图形学应用
专知会员服务
39+阅读 · 2019年10月9日
Rethink Deepfakes,浅谈深度学习落地
AI科技评论
5+阅读 · 2019年2月27日
2018 年最棒的三篇 GAN 论文
AI科技评论
4+阅读 · 2019年1月14日
ICCV17 :12为顶级大牛教你学生成对抗网络(GAN)!
全球人工智能
8+阅读 · 2017年11月26日
计算机视觉近一年进展综述
机器学习研究会
8+阅读 · 2017年11月25日
gan生成图像at 1024² 的 代码 论文
CreateAMind
4+阅读 · 2017年10月31日
MoCoGAN 分解运动和内容的视频生成
CreateAMind
18+阅读 · 2017年10月21日
Auto-Encoding GAN
CreateAMind
7+阅读 · 2017年8月4日
Adversarial Transfer Learning
Arxiv
12+阅读 · 2018年12月6日
VIP会员
相关资讯
Rethink Deepfakes,浅谈深度学习落地
AI科技评论
5+阅读 · 2019年2月27日
2018 年最棒的三篇 GAN 论文
AI科技评论
4+阅读 · 2019年1月14日
ICCV17 :12为顶级大牛教你学生成对抗网络(GAN)!
全球人工智能
8+阅读 · 2017年11月26日
计算机视觉近一年进展综述
机器学习研究会
8+阅读 · 2017年11月25日
gan生成图像at 1024² 的 代码 论文
CreateAMind
4+阅读 · 2017年10月31日
MoCoGAN 分解运动和内容的视频生成
CreateAMind
18+阅读 · 2017年10月21日
Auto-Encoding GAN
CreateAMind
7+阅读 · 2017年8月4日
Top
微信扫码咨询专知VIP会员