GitHub 又一黑科技项目面世！网友惊呼：这也太强了

我就是我 2022-09-05 13:59 326阅读 0赞

本文转载自GitHub技术社区

不知道如何表白？送花吃饭太没新意又太露骨？

![图片][a2d7d55a10bab779400b9b55283193e7.gif]

今天小G给大家介绍一个 AI 黑科技，能够**完美融合任意两张人脸，并带有丰富的表情**，让你不仅凡尔赛地炫个技，还能巧妙风趣地表个白：我觉得咱俩挺合适，可以一起为人类向更美的方向进化作出杰出贡献。

![图片][72025ba80561e9bb66427644b0701e62.gif]

**不信？你看 AI 生成的可爱的 bb 们 (๑^ں^๑)**

![图片][3d1b191c47506977511eb95219006924.gif]

![图片][01f0e9d71feda5e432be365481b63d50.png]

![图片][32cd70f6de3217ca2a8685f55b7c3ec2.png]

还没看够？再给大家看一张飞桨小伙伴们的融合大乱斗！

![图片][320133e2c9f4142b86813c70604a4295.png]

想要**马上看到后代长相**？还不快去项目首页体验一下！！！

https://github.com/PaddlePaddle/PaddleGAN/blob/develop/README\_cn.md

![图片][00cae05ae590653d1d77b01d5711df22.png]

这还不够？还需要具体的实现步骤？小G通通满足你！

**原理大揭秘**

这个炫酷的黑科技是由开源界频上 Trending 的飞桨生成对抗网络套件 PaddleGAN 所提供，里面内置的 StyleGAN V2 与 FOM 分别实现人脸融合与让人脸动起来的效果。

PaddleGAN 中提供的人脸融合能力是由 StyleGAN V2 以及新增的 Fitting 和 Mixing 模块组成的。

*  Fitting 模块是根据已有的图像反推出解耦程度较高的风格向量，可用于人脸融合、人脸属性编辑等任务中。
 *  Mixing 模块是对上述 Fitting 模块中生成的风格向量实现不同层次和比例的混合。
 *  StyleGAN V2 则根据 Mixing 模块中生成的混合向量生成新的人脸。

因此，人脸融合任务可以分为三个步骤进行实现：

1.  Fitting 模块提取两张人脸图片的风格向量
2.  Mixing 模块对两种风格向量进行混合
3.  StyleGAN V2 根据混合后的风格向量生成混合后的人脸

![图片][c9f67a9fc2020f7a9c60639a44ff130a.png]

**实操步骤**

STEP 1：

Fitting 模块提取人脸向量，并重新生成人脸

只需修改两个参数：

*  input\_image：人脸照片原图路径，注意最好是自拍和大头照，无眼镜效果更佳噢～
 *  output\_path：新生成的人脸照片的存放路径，后续需要放在 Mixing 和生成的模块中使用

另外，因为是两张照片融合，需要两次替换 input\_image 和 output\_path 的路径，分别运行以下命令，即可成功提取两张人脸的风格向量，用于后续的融合～

![图片][424010d3da18c28efc44b7836f199196.png]

效果如下：

![图片][d9a5ad6047838626854ea09166fe9f62.png]

STEP 2&3：

Mixing 模块融合向量，StyleGAN V2 生成新人脸

只需要更改三个参数：

1.  latent1：STEP2 中提取的一张人脸的风格向量（STEP2 中的 output\_path 路径）
2.  latent2：STEP2 中提取的一另张人脸的风格向量（STEP2 中的 output\_path 路径）
3.  output\_path：两张脸融合的新人脸照片保存的路径

![图片][c1b5bb98c105abde4149295ab31fef7a.png]

![图片][77f5e4f2c07463c63d110d052b1c32d5.gif]

**BONUS：让人脸 “动” 起来**

![图片][77f5e4f2c07463c63d110d052b1c32d5.gif]

新版的 **PaddleGAN** 中提供的 **First Order Motion** 算法全面升级，不仅能够将人物 A 的脸部动作搬移到人物 B 脸上，让人物 B 的脸完美演绎人物 A 的表情：

![图片][74aac93a513a087c6e410d9f2482a512.gif]

还支持让视频**清晰度提升一倍**，同时**新增人脸增强特效**，丰富地刻画了脸部细节，使得脸部动态表情栩栩如生！

![图片][8b39e16cc746433c158e45630d136afa.png]

在本项目中，可自制脸部动作视频（驱动视频），让你的后代拥有你为 TA 专属定制的表情～

![图片][934da6d103012409897b9f6495eb36f7.png]

\* 贴心的 PaddleGAN 为小伙伴们准备了完整项目代码，请到项目首页查看吧！

https://github.com/PaddlePaddle/PaddleGAN/blob/develop/README\_cn.md

至此，两张不同的人脸就实现了完美的融合，并生动形象地出现在了我们的眼前～

![图片][bd158f62e98ca763595098ff7c068794.gif]

还在等什么呢？快来一睹后代真容吧！

**PaddleGAN AI 能力大揭秘**

难道 PaddleGAN 还有啥其他厉害的能力？

小G上项目首页转了一圈发现，人脸融合、人脸表情迁移竟然只是 PaddleGAN 数十种能力的一种， PaddleGAN 还提供语音转唇形（声音对口型）、视频 / 照片修复（上色、超分、插帧）、人脸动漫化、照片动漫化、图像生成、图像风格迁移等十余种能力，令人大开眼界！

让我们一睹为快吧～

**「带着珍珠耳环的少女」播新闻：**

![图片][17cafb76edfe7f8c3adbf37a872eb14d.gif]

**百年影像上色、插帧、提高分辨率：**

![图片][07fdc6dfdf86bf8fc705ee2281cde328.gif]

**照片动漫化：**

![图片][459cf002ff7e002cc8c5720d0c82674c.png]

**人脸动漫化：**

![图片][8f321bb1ee5e90302dcccb3df5b6a7ef.png]

[a2d7d55a10bab779400b9b55283193e7.gif]: /images/20220829/4b19e5d75d824b039ab549230a30d4a2.png
[72025ba80561e9bb66427644b0701e62.gif]: /images/20220829/d7830fe40a5b415e97fef17479ec594c.png
[3d1b191c47506977511eb95219006924.gif]: /images/20220829/c0f50a86651d42e18ad6b5e2d9357135.png
[01f0e9d71feda5e432be365481b63d50.png]: /images/20220829/be559a82fec44a6e88769fde5d1298b4.png
[32cd70f6de3217ca2a8685f55b7c3ec2.png]: /images/20220829/1b6f4d8a84b847ce8fc42a6dc253d871.png
[320133e2c9f4142b86813c70604a4295.png]: /images/20220829/9d44d479fb1541b3b2445ebd20ce011d.png
[00cae05ae590653d1d77b01d5711df22.png]: /images/20220829/686ef68725e343c68498fae995ef3629.png
[c9f67a9fc2020f7a9c60639a44ff130a.png]: /images/20220829/61ffc4123b9246ef94b151ee7423176a.png
[424010d3da18c28efc44b7836f199196.png]: /images/20220829/33282d549eae4227aa46d4cd7505d707.png
[d9a5ad6047838626854ea09166fe9f62.png]: /images/20220829/4b50d61b5d684146af1bb188d9d56b38.png
[c1b5bb98c105abde4149295ab31fef7a.png]: /images/20220829/e47f29a593b34746b07687f65565877f.png
[77f5e4f2c07463c63d110d052b1c32d5.gif]: /images/20220829/230e3657029045be8be4176045aac1a6.png
[74aac93a513a087c6e410d9f2482a512.gif]: /images/20220829/aa4aedfd020c430dabcb59d882a02ab4.png
[8b39e16cc746433c158e45630d136afa.png]: /images/20220829/348ce2cae66a4e6ebfdd23288c22cb3d.png
[934da6d103012409897b9f6495eb36f7.png]: /images/20220829/c519980413f0418ea1ff7f1c8ce7b98a.png
[bd158f62e98ca763595098ff7c068794.gif]: /images/20220829/8ab715d49a5d4ec1bf6836ce2ea86d77.png
[17cafb76edfe7f8c3adbf37a872eb14d.gif]: /images/20220829/ce320d571353413f96551b251dd729e6.png
[07fdc6dfdf86bf8fc705ee2281cde328.gif]: /images/20220829/4da93ad03a99459eb62468a6b92dbf51.png
[459cf002ff7e002cc8c5720d0c82674c.png]: /images/20220829/c869d9eab6eb437ab5a7fc3a4fcbfdf2.png
[8f321bb1ee5e90302dcccb3df5b6a7ef.png]: /images/20220829/4fb1c08eece7407fb93d3fef0bfa8541.png