BYR Achieve · 镜像论坛

## 分享一个动漫化软件，大家来玩呀~ 我们想要将动漫化功能集成到我们实验室研发的会议系统中，于是我们开发了“uranus”软件来测试“人脸识别以及动漫化”的效果，还挺好玩～欢迎试玩，后续我们也会将源代码开源，欢迎一起交流讨论～ **算法简介** ------------- - 目前GAN网络在风格迁移和图像生成领域受到了广泛关注，因此可以结合以上两种思路对人像进行风格转换，同时保留原人像的关键信息。 - CycleGAN：传统的Pix2Pix方法的关键是提供了在这两个域中有相同数据的训练样本。CycleGAN的创新点在于能够在源域和目标域之间，无须建立训练数据间一对一的映射，就可实现这种迁移，因此可以使风格化任务的训练变得更简单。但问题是生成的图像会存在一定伪影问题。 - U-GAT-IT：在CycleGAN的基础上，通过一个辅助的分类器提出了一种新的注意力机制，并结合了新的正则化方式AdaLIN，构建了一个端到端的弱监督图像跨域转换模型。在一定程度上提升了CycleGAN的生成效果。 - 对于输入图片，我们会先做人像对齐、裁剪、分割预处理。先检测图片中人像的关键点（dlib: shape_predictor_68_face_landmarks.dat），基于检测到的关键点进行人像水平对齐，然后将人脸区域裁剪下来，再检测人脸的mask并提取纯人像(tensorflow: seg_model_384.pb)，最后送入网络进行风格转化。 ### 参考链接 - CycleGAN：https://arxiv.org/abs/1703.10593 - U-GAT-IT：https://arxiv.org/abs/1907.10830 ### 讨论与建议 - 目前在光线不好的时候，动漫化效果会降低，以及对人的侧脸动漫化效果会降低。 - 当人离摄像头过远或者过近的时候，会检测不到人脸。 - 人的边缘和背景的颜色比较接近的时候，以及前景包含除人像外的其他物体时，提取纯人像效果降低。同学们有什么优化的思路或者建议，欢迎在评论区留言～ **下载指南** ------------- 链接：https://pan.baidu.com/s/10YW7756bjRjnJIfM-2QFRg 提取码：l9pf windows的同学们下载.zip压缩包到本地解压, 解压路径不能带中文，mac的同学下载dmg文件。windows打开文件夹双击uranus.exe即可使用, mac双击dmg文件安装后即可使用！ **Uranus** **使用指南：** --------- **主页面：** ### 选择图片来源： - 既可以点击【使用图片】上传本地 png/jpg/jpeg图片，也可以点击【使用摄像头】打开摄像头，然后再点击【截图】截图摄像头画面进行动漫化。 - 使用图片 - 使用摄像头 - 然后点击截图 ### 保存图片 - 点击【保存图片】，会弹出保存成功的弹窗，里面包含不同系统保存的路径信息。 - windows保存在可执行文件同目录的photo文件夹下 - mac保存在双击后安装后Uranus->显示包内容->Contents/Resources/photo文件夹下 ### 查看帮助 - 点击【帮助】，有相应的使用说明 -------- 效果图展示 --- **趣味应用** ------------- - 生成动漫化头像后，保存下来，打开美图秀秀或者别的软件，点击抠图，然后添加背景，即可以制作自己想要的头像，海报，或者动漫人物合照！（ps：以前楼主跟好朋友找别人60r画情侣动漫头像来着qaq。） - 楼主用脚技术p的我与彭于晏 - 作为第一批试用者的室友与她男朋友已经换上了情侣头像 - 楼主梦想的未来养狗的生活 **楼主有话说** ------------- - 在做这个功能的时候，楼主会想为什么要做动漫化，等到真的做出来，楼主跟身边的人都留下了很多有趣又表情生动的漫画图片，并且通过ps拼在一起，就好像天南地北的朋友和家人，就在自己身边。特别是自己的家人，每年见面十几天，想拍他们的照片他们也不愿意，偷拍的照片光线和表情都不好，此时动漫化再拼接出来的漫画，趣味和思念都包含在里面。 - 这是楼主以前偷拍的家人，做成的合照～（可以看出来拍奶奶和爸爸的时候光线不好，效果也有点降低）

分享一个好玩的人脸动漫化软件