视频中别人脸可以换成自己的么,就是说动态的脸,或人可以进行换别人的吗?

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了视频中别人脸可以换成自己的么,就是说动态的脸,或人可以进行换别人的吗?相关的知识,希望对你有一定的参考价值。

可以的,可以用AI技术实现动态视频的换脸,在Github上有很多关于AI换脸的开源项目,比如faceswap, deepfacelab。

比如我们要将原视频中的人物David替换成Jack的脸,以此为例子解释实现原理。

    人脸侦测和识别。首先要让机器通过含有David的视频定位并识别到其中的人脸特征值,通过深度学习将David的面部还原到正面、平行均匀光照、标准亮度的场景下。接下来对含Jack的视频进行相同操作,将Jack也还原到正面、平行均匀光照、标准亮度的场景下。

    确定变换矩阵:接下来我们对原视频的人脸信息进行定位与侦测,并进行特征提取,然后用Jack的特征与David的相对比,找出两者特征转换所需扭曲、光照等变换的矩阵。

    人脸替换:对Jack的人脸信息基于矩阵进行变换,也就是把Jack还原到原视频的拍摄角度及光源场景下,形成新的人脸信息,并完成替换。

    对于视频中的每一帧信息重复以上操作直至结束。

目前已经有类似的手机应用程序,但是只能支持到正面场景且运动状态并不剧烈的视频画面。

参考技术A

AI换脸黑科技呀,看这个娜扎换鹿晗的脸,是不是傻傻分不清楚

参考技术B

PS 特技

    人脸侦测和识别。首先要让机器通过含有David的视频定位并识别到其中的人脸特征值,通过深度学习将David的面部还原到正面、平行均匀光照、标准亮度的场景下。接下来对含Jack的视频进行相同操作,将Jack也还原到正面、平行均匀光照、标准亮度的场景下。

    确定变换矩阵:接下来我们对原视频的人脸信息进行定位与侦测,并进行特征提取,然后用Jack的特征与David的相对比,找出两者特征转换所需扭曲、光照等变换的矩阵。

    人脸替换:对Jack的进行基于矩阵的变换,也就是把Jack还原到原视频的拍摄角度及光源场景下,形成新的人脸信息,使用Jack的体征对David进David。

    对于视频中的每一祯信息重复以上操作直至结束。

参考技术C 视频中别人的脸可以换成自己的吗?当然可以了,如果你会p图的话。追问

怎么操作?

怎么将本地视频ai换脸

最近这几年视频换脸十分流行,在B站常有up主上传自己恶搞的AI换脸视频。当然,PS修图一直都是热点,但PS常用于P一张图。而网上看到的,比如将迪丽热巴演的某片段换成了鹿晗的脸(没有其他意思,确实有这些恶搞)??以至于以假乱真,这些都是咋做到的呢?其实就是使用到了强大的AI技术:AI+“造假”混合,就产生了“深度造假”。

Deepfakes,一种混合“深度学习”和“造假” 的合成技术 ,其中一人的现有图像或视频被替换为其他人的肖像。Deepfakes利用了机器学习和人工智能中的强大技术来生成具有极高欺骗力的视觉和音频内容。用于创建的主要机器学习方法是基于深度学习的训练生成神经网络,如生成对抗网络GAN。

按照维基的资料,Deepfakes这个词起源于2017年底,来自Reddit用户分享了他们创建的“深度造假”产品。2018年1月,启动了名为FakeApp的桌面应用程序。此应用程序使用户可以轻松创建和共享彼此交换脸部的视频。截至2019年,FakeApp已被Faceswap和基于命令行的DeepFaceLab等开源替代产品所取代。较大的公司也开始使用Deepfake。

本文介绍使用DeepFaceLab这款开源产品,它基于python和tensorflow。说明,基于本文掌握的内容不得用于非法违法目的以及违背道德的行为,否则本人概不负责。

开始前,需要在https://github.com/iperov/DeepFaceLab上获取下载地址,并进行安装(本教程时间为2020/07/31)。

这里要说下,使用DeepFaceLab最好需要足够好的电脑配置,因为AI深度训练的过程基于cpu以及gpu,显卡性能越好意味着其速度越快效果越好。但这不是绝对,如果有足够的耐心也是能够合成出一定效果的,一切都只是娱乐嘛。(ps:我写本文时用到的是win7电脑,非高配置,这不重要)

安装完毕后,你会在DeepFaceLab_NVIDIA\下看到类似下图的文件:

安装后会看到的一些文件
其中,workplace存放我们的视频素材以及图片。在这之前,你需要准备两个视频,源视频是你想换过去的人脸的视频(比如你自己),目标视频是被换掉的人脸的视频(比如星爷)。本文把吴孟达老师的一段“你在教我做事啊”的视频片段换成沈腾,所以使用的源视频素材是沈腾,而目标视频就是“你在教我做事啊”小片段。将源视频重命名为data_src.mp4,目标视频重命名为data_dst.mp4并放置于workplace。(确保选择的源视频素材人脸清晰、正脸、表情丰富但不要遮挡、模糊,时长不需要长)
参考技术A 回答

视频ai换脸方法1、首先确认自己的机器能不能带的动fakeapp,显卡的显存要达到4GB,因为al换脸软件对GPU要求很高,显存低于4GB的话可能会带不起来软件的。内存要求至少要8GB,如果你的机器内存少于8GB,建议再加个内存条。2、然后我们开始下载软件和相关的插件,首先下载fakeapp,在网上搜索就能下载,但是不是这一个软件就可以al换脸的,不然直接打开软件会提示你需要安装插件不能使用。然后搜索下载安装cuda9.0。3、然后在网上下载core文件然后解压缩在fakeapp的目录里面,还需要下载vc++算法程序,一般来说系统自己会带有的。然后打开命令指示符,输入pipinstalltensorflow-gpu==1.5安装tensorflow1.5的gpu版,然后再打开fakeapp就可以用了。4、打开软件,第一步要截取脸部的图片和被换人的照片,用软件自带的截图功能就可以,如果视频时间过长可以在设置里面把帧率调低一点,一般来说素材照片各准备一千张左右就可以了,分别放在新建的文件夹A和B中,A放被换人,B放想换的人。

5、然后把两个文件夹里面的图片中,侧脸的或者脸部被遮挡的照片都删除掉,在软件的训练功能中设置文件夹的路径,然后开始训练,在设置里选用GPU工作,如果使用CPU工作的话会非常非常的慢。训练时间会很长,大家耐心等待。6、经过很长时间的训练后,A和B的差值已经非常小了,然后就可以实现换脸了。

以上是关于视频中别人脸可以换成自己的么,就是说动态的脸,或人可以进行换别人的吗?的主要内容,如果未能解决你的问题,请参考以下文章

如何把Jquery button 中的 Icon换成自己定义的Icon (CSS SPRITES)

怎么给视频里的人物换脸

"我在成人网站上, 看见了杨超越...."

怎么将本地视频ai换脸

3个月实现产品落地,这个GitHub 8000星的AI实时换脸项目有APP了

怎么在手机将视频ai换脸