橙光游戏|字节AI实习生搞出有趣玩意儿:马化腾、雷军变二次元帅哥( 二 )


文章插图
第二个是从StyleGAN2的预训练权重开始,重新微调出一个属性感知的生成器。
包括不同属性(如性别、年龄)的多个生成路径和多个判别器,以更好地实现依赖属性的风格迁移。
橙光游戏|字节AI实习生搞出有趣玩意儿:马化腾、雷军变二次元帅哥
文章插图
StyleGAN2生成器和属性感知的生成器这两个训练阶段是独立执行的,可以并行训练。
橙光游戏|字节AI实习生搞出有趣玩意儿:马化腾、雷军变二次元帅哥
文章插图
这样分开操作不仅减少了需要的训练数据集大小,还使风格迁移拥有更大的灵活性。
不过使用小数据集时判别器容易过拟合。解决办法是加入一个早期停止策略,一旦风格化效果达到预期,就停止训练。
这还没完,如果用上一阶运动技术(First Order Motion),AgileGAN还可以完成视频的风格迁移。
字节跳动实习生一作
另外,AgileGAN还是个“实习生作品”,成型于一作宋果鲜在字节跳动实习期间。
橙光游戏|字节AI实习生搞出有趣玩意儿:马化腾、雷军变二次元帅哥
文章插图
宋果鲜,本科毕业于中科大数学专业,目前正在南洋理工大学攻读计算机科学博士学位。同时,他也是字节跳动美国AI实验室的实习生。
他的研究方向主要是计算机视觉和计算机图形学,包括基于图像的3D人脸重建/分析、VR/AR应用等等。
所以,在AgileGAN眼里,宋同学又是什么样的呢?
发量和发质,真的很优秀了。
说起来,没准以后就能在抖音直接玩上这样的GAN了。
要是等不及,作者已经放出了试玩版:
【 橙光游戏|字节AI实习生搞出有趣玩意儿:马化腾、雷军变二次元帅哥】https://www.agilegan.com/