AI 通过眼睛的反光度，来识别是否 Deepfake 换脸

Posted 2022-01-14 AI科技大本营

编译 | 禾木木

出品 | AI科技大本营（ID:rgznai100）

Deepfake 是一种 AI换脸工具，现被滥用，从虚假宣传活动到插入一些违法内容，并且篡改后的图像是难以被检测到的。

一种新的 AI 工具提供了一项令人惊讶的简单方法来发现它们：观察眼睛反射的光。

该系统是由 Buffalo 大学的计算机科学家创建。在对肖像风格照片的测试中，该工具在检测 Deepfake 伪造图像方面的有效率为 94%。

该系统在通过分析角膜来曝光伪造的图片，角膜具有镜面般的表面，在光线照射下会产生反射图案。

在相机拍摄的真实人脸照片中，两只眼睛的反射会相似，因为它们看到的是相同的东西。但是，由 GAN 合成的 Deepfake 图像通常无法准确捕捉到这种相似之处。

相反，它们经常表现出不一致，例如会有不同的几何形状或不匹配的反射位置。

Deepfake 图像（右）中的角膜有更大的差异，可能是因为它们是通过组合许多照片生成的。

人工智能系统会通过绘制人脸，并分析每个眼球反射的光来搜索这些差异。

它会生成一个分数作为相似性度量。分数越小，这张伪造后的图片就越有可能是 Deepfake 。

事实证明，该系统被证明检测取自 This Person does not Exist 的 Deepfake 方面非常有效，这是一个使用 StyleGAN2 架构创建的图像存储库。然而，研究者承认它有一些局限性。

该工具最明显的缺点是它依赖于双眼的反射光源。这些图案中的不一致可以通过后期动手处理来修复，如果图像中看不到眼睛的话，则该方法将不起作用。

它也仅仅是对肖像图片有效，如果照片中的人脸没有看着相机，系统则可能会产生误报。研究人员计划调查这些问题，以提高方法的有效性。以目前的形式来说，它不会检测到最复杂的 Deepfake ，但它仍然可以发现许多粗糙的。

参考链接：

https://thenextweb.com/news/ai-detects-deepfakes-analyzing-light-reflections-in-the-cornea-eyes-gans-thispersondoesnotexist