AI换脸鉴别率超99.6%，微软技术破除DeepFake虚假信

此前DeepFake换脸在全球引发轩然大波。从生成足以以假乱真的名人不雅视频开始很多使用者将这个“换脸神器”当成了视频造假工具并通过社交网络将虚假信息传播到全世界。DeepFake等技术出现不仅提升了换脸的真实性SEO排名服务并通过社交网络将虚假信息传播到全世界。DeepFake等技术出现不仅提升了换脸的真实性其开放源代码的方式更是降低了将该等技术滥用于虚假信息制作和传播门槛。

事实上大约30%经过AI换脸的合成照片、合成视频是人类仅凭肉眼无法识别的很容易被当作真实信息进行再次传播。这已成为一个亟待解决的社会性问题面对这个问题我们应该以及可以做些什么？微软亚洲研究院给出了解决方案。

目前最常被使用的AI换脸算法有三种：DeepFake、FaceSwap和Face2Face。其中DeepFake基于大家所熟知的GAN技术SEO排名服务DeepFake基于大家所熟知的GAN技术对于它所生成的脸人类的识别率大约为75%*。FaceSwap是一个学习重建脸部特征的深度学习算法可以对给出的图片进行模型替换人类对于此类换脸的识别率也是75%左右*。Face2Face则是用其他真实的人脸去替换原本的人脸不涉及人脸的生成对于它制造的脸人类的识别率只有41%*。作为目前学术界最大的合成视频数据库之一由慕尼黑技术大学创建的FaceForensics数据库涵盖了经过以上三种换脸算法编辑的公开视频以供学术研究使用。

多年来微软亚洲研究院在人脸识别、图像生成等方向都拥有业界领先的算法和模型。在CVPR 2018上微软亚洲研究院视觉计算组发表了论文“Towards Open-Set Identity Preserving Face Synthesis”其中的技术能够利用开放数据集中的数据逼真地合成保留图中人脸身份信息的图像。深厚的技术积累让研究员们对“进攻方”的技术原理有着更深刻的理解进而能够更有针对性地研发换脸鉴别算法。

因此微软亚洲研究院研发的换脸鉴别算法基于FaceForensics数据库的测试结果均超越了人类肉眼的识别率以及此前业界的最好水平*：对于DeepFake的识别率达到了99.87%对于FaceSwap的识别率为99.66%对于Face2Face的识别率为99.67%。

表1：针对已知换脸算法的识别测试结果

更重要的是一般的换脸鉴别方案需要针对每一种换脸算法研发专门的换脸鉴别模型想要鉴别一张图像的真伪需要逐个尝试所有模型。微软亚洲研究院的算法则可以用一个通用模型去鉴别不同类型的换脸算法所制造的脸。与此同时研究员还对人脸合成时难以处理的细节进行检查如眼镜、牙齿、头发边缘、脸部轮廓将它们作为算法关注的重点从而提高识别准确率。相比其他同类技术来自微软亚洲研究院的换脸鉴别算法很好地解决了应对动态幅度大、有遮挡、有表情变化的图像的难题。

除了准确识别已知算法合成的图像SEO排名服务来自微软亚洲研究院的换脸鉴别算法很好地解决了应对动态幅度大、有遮挡、有表情变化的图像的难题。

除了准确识别已知算法合成的图像换脸鉴别的另一大挑战是应对尚未出现的新算法。将现有的换脸鉴别算法直接用于新算法时它们的有效性往往会显著下降。为此微软亚洲研究院提出了一种通用换脸鉴别方法。为了更好地考察这一算法对未知换脸算法的鉴别能力研究团队用真实图像对模型进行了训练再让其辨别多种未知换脸算法生成的图像。实验结果表明与基线算法相比新算法对各类换脸算法的识别率均有大幅提升。随着研究团队对模型的进一步优化通用鉴别模型一定能越来越精确地帮助我们应对新算法所带来的问题和挑战。

表2：针对未知换脸算法的识别测试结果

标签： 算法鉴别微软换脸