4

Python实战:将头像转成动漫风!

 1 year ago
source link: https://developer.51cto.com/article/711158.html
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
21c8245912fb332b56d259c9279aaa1bebb658.jpg

最近遇到了一个问题,需要将头像转化动漫风,当时第一想法就是找现成的轮子。

065a50e8869b0dd8333472e1c74415eb951add.jpg

▲图片转成像素风

将头像转化为动漫风,就是希望在保持原图像信息和纹理细节的同时,将真实照片转换为动漫/卡通风格的非真实感图像。目前除了百度api,Github上还有不少开源库可供我们直接使用。

其中AnimeGAN是来自武汉大学和湖北工业大学的一项研究,采用的是神经风格迁移 + 生成对抗网络(GAN)的组合,实现效果非常符合我们的需求。

c6bd25350baf30a10e51958bcbfff63361a939.gif

AnimeGAN最早使用的是Tensorflow框架,不过查询资料后发现该项目已支持PyTorch框架。

76cb3097798c7026b87219da939cc29410a42c.jpg

地址:https://github.com/bryandlee/animegan2-pytorch

而我正好之前基于PyTorch实现过微博评论情感分析,所以用起来也不会有什么负担,还省得安装库了。

Pytorch安装

PyTorch是一个开源的Python机器学习库,基于Torch,用于自然语言处理等应用程序。这个深度学习框架,可以应用在数值建模、图像建模、文本建模、音频建模等等多个方向。

747321c978bfe64f69e1468eb05e13790dd5fd.jpg

安装Pytorch会比其他库麻烦一些,如果去官方安装下载,需要根据实际配置得到适合自己的安装命令。

e65f18937468a43154d6263fc61951a77684c5.jpg

如果你通过上面这种步骤发现下载速度慢,或者遇到各种问题,不妨试试下面这个网站:

https://download.pytorch.org/whl/torch_stable.html

网站视图:

05beceb005ba698dd70813cd280b4a27417718.jpg

动漫风格迁移

安装Pytorch框架后,我们便可以将该animegan2-pytorch项目clone到本地/直接下载下来:

git clone https://github.com/bryandlee/animegan2-pytorch

下载到本地的文末目录如下图所示:

8863a7816e12274b0498838c46da11be666c67.jpg

其中weights文件夹下包含四个权重,选择对应的权重就能实现自己想要的动漫风格迁移。samples下的inputs文件夹中储存了图片示例,可以直接拿来试水。除此以外,我还在同一路径下新建了output文件夹,用于存放处理后的图片。

接下来,我们只需要在命令行中运行test.py脚本就可以调用该项目,具体命令格式如下:

python test.py --checkpoint [模型文件路径] --input_dir [输入图像所在目录] --output_dir [输出目录] --device [设备选择,cpu或者cuda]

实际操作:

43861a336191ae745fc275415224184cb9e93d.jpg

由于是像实现人脸动漫迁移,所以我分别使用了face_paint_512_v1.pt和face_paint_512_v2.pt权重,效果如下图所示:

61c5f924023e17039e22348e91d21c59529223.jpg

实战效果①

换一张图看一下:

9629fc6671b96da769a8940de044ea0b542f53.jpg

实战效果②

个人觉得face_paint_512_v2.pt权重的处理成品更符合我对动漫风的想象,大家怎么看呢?

最后我也试了试paprika.pt对风景图片进行动漫迁移。

d635140173d95af67e99026fe23f2a3fede2fb.jpg

效果如下图所示:

0314967832f9182f829574412f4f65231a79ae.jpg

如果大家对将头像/图片转化动漫风感兴趣,不妨也来试试~

如果看完本文的小伙伴,不想安装Pytorch,又想直接打造一个自己专属的漫画脸?

可以电脑打开这个网址:https://huggingface.co/spaces/akhaliq/AnimeGANv2,这是在线AnimeGANv2的APP,无需你本地安装什么框架,直接就可以进行转换。

817088132d88087858d78461fa17caa4b5bce8.jpg

▲AnimeGANv2网站


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK