P图美颜1秒识破，Adobe伯克利联手打造“反PS”神器

报道 | 新智元

虚假视频和图片的泛滥传播已经让整个世界越来越焦虑，连PS的老东家Adobe都坐不住了！

近日，Adobe在博客上宣布，公司与加州大学伯克利分校的科学家合作取得了新的研究成果，利用机器学习技术，可以检测出面部图像是不是被人为修改过的。

这项研究由Adobe研究人员Richard Zhang、Oliver Wang以及加州大学伯克利分校合作者Shengyu Wang，Andrew Owens博士和Alexei A. Efros教授共同完成。该工具使用了由DARPA MediFor计划赞助的Photoshop Face Aware Liquify功能。虽然目前仍处于早期阶段，但Adobe和加州大学伯克利分校之间的这类合作，是迈向图像取证全面推进的重要一步。

这项新研究旨在更好地检测图像、视频、音频和文档的编辑修改。过去Adobe的研究主要集中在基于拼接，克隆和删除等修改手段的图像处理和检测。

此次打造的这款工具专门检测由Photoshop的Liquify功能进行的编辑，Liquify常用于调整面部图像的形状和改变面部表情。“Liquify的效果可能很精致，可以作为一个有趣的测试案例，用于检测面部的剧烈或微妙的变化，”Adobe表示。

这项新研究的基本问题是：

是否能创建一种比人类更可靠地识别面部图像被修改的AI工具？

这款工具是否能够解码对图像所做的特定更改？

是否能够撤消这些更改，查看并恢复原始图像？

这两张图中的人脸图像均取自本研究的训练数据集，上图中为真实图像，下图中为经过修改后的图像，你能看出真假吗？

该项目通过训练卷积神经网络（CNN），成功识别经过修改的面部图像。研究人员编写了Photoshop脚本，建立了一个内容广泛的图像训练集，在数千张从互联网上抓取的图片上使用Face Aware Liquify功能。然后随机选择这些照片的子集对模型工具进行训练。

此外，研究人员还聘请了一位艺术家，专门对数据集中的图像进行人为修改。由于图像中包含了人类创造力的这一要素，大大拓宽了测试集中的图像修改和技术的范围，使训练数据集的多样性超出了仅包含自动合成生成的图像的范围。

该工具还能确定面部形状变化的具体领域和方法。在实验中将编辑后的图像恢复到其原始状态，给研究人员留下了深刻的印象。

 由左至右依次为：经修改的图像、检测到修改、自动还原后的图像、原始图像

经过训练之后算法非常有效。面对经后期编辑过的面部图像，人类志愿者选出正确的答案的概率是53%，而算法的判断正确率高达99％。这款工具甚至能够建议如何将照片恢复成为原来未编辑的状态。

 算法模型的全局评估结果

“还原原始图片的任务似乎是不可能完成的，因为面部形状和特征变化的可能性非常多，”加州大学伯克利分校的Alexei A. Efros教授说。“但在本研究中，深度学习能够看清底层图像数据的组合，比如变形、假像，以及更高级别的线索，比如画面布局等，这些方法看起来是有效的。”

不过他也表示，目前“一键还原”这种神奇功能现在还没有实现。“但我们生活在一个越来越难以信任我们所消费的数字信息的世界，我期待着进一步探索这一研究领域。”

Adobe研究部门负责人Gavin Miller表示：“其实除了这样的技术之外，抵御虚假图片欺骗的最好的防御，是越来越老练的公众。我们需要让公众了解，他们看到的内容是可能被篡改的。这种篡改大部分时候都是为了误导他们。”

目前Adube没有立即打算将这项最新成果进行商业化，公司在博客中表示：“虽然我们为Photoshop和Adobe的其他创作工具对世界的影响感到自豪，但我们也认识到了技术本身的道德意义，因为虚假图像和视频的泛滥是一个严重而紧迫的问题。”

参考链接：

Adobe博客：https://theblog.adobe.com/adobe-research-and-uc-berkeley-detecting-facial-manipulations-in-adobe-photoshop/

Theverge：https://www.theverge.com/2019/6/14/18678782/adobe-machine-learning-ai-tool-spot-fake-facial-edits-liquify-manipulations

论文：https://arxiv.org/pdf/1906.05856.pdf

本篇文章来源于: 深度学习这件小事