字节数AI见习生搞出有意思玩意儿：腾讯、小米雷军变二次元帅哥

发布时间：2021-06-10 22:50:09发布人：日新微博

那样的于和伟教师，是你了解的那一个“然后演奏然后舞”的feel吗？
而假如容嬷嬷也进到到这一异次元，风格居然……
啊，是世外高人的觉得没有错了，容嬷嬷不愧是儿时圣神！
那假如把互联网巨头们变为那样的风格，又会是如何一种场景？
先看一下小米雷军，端的是眉目清秀，英俊潇洒。
再看BAT的三位巨头……
好家伙，觉得能够立即看图写作，去橙光游戏整一个《互联网风云录之三雄争霸》了。
（人民币的大写腹稿已到位……）
连外国人，也可以被这一异次元统一风格。
看图灵奖获得者、深度神经网络三巨头，Bengio狷狂，Hinton刚毅，LeCun冷魅，绝世高手的feel立即打满，随时随地能够神雕英雄传走一波。
△Hinton巨头小说男主脸石锤
连LeCun自己看过，都禁不住分享：
想来你也看出来，这的确也是GAN的作品。
但是这一来源于字节跳动的GAN届新星，可不止是能当橙光游戏原画带师。
可爱卡通风：
水彩画风：
乃至是川普风……
只需男孩和女孩各100张相片做为训练样本，让AgileGAN看中一个钟头，它就都能挥洒自如。
即便相片上的人戴了防护口罩，也可以把脸补齐：
还会继续全自动把遮阳帽转化成秀发。戴的遮阳帽越多秀发就会越密，假如戴5层遮阳帽，就这样了：
乃至还能开发设计出一些鬼蓄游戏玩法，例如把转化成的图象再喂回来……
△LeCun变漂亮美女
而塑造出那么一个文可制图、武能鬼蓄的GAN的，是字节跳动和贝德理工学院。一作宋果鲜，现阶段在字节跳动出任科学研究见习生。
而且，AgileGAN的有关毕业论文早已当选SIGGRAPH 2021。
只需100对样版训炼1小时
往往取名为AgileGAN (灵巧GAN)，是由于它在一块V100上训炼時间只必须1小时，训炼数据也只必须大约100对样版(男孩和女孩各100张)。
那么强，如何保证的？
要了解风格迁移的一大难题，便是如相片到可爱卡通这类脸部几何图形样子转变很大的转移。
假如过度注重保存几何图形样子特点，会导致不符审美观的歪曲与缺陷。
可是保存的少了转移完就和键入的相片并不像了。
△之前的优化算法并不是脸发黄便是五官歪曲
这是由于，风格迁移优化算法如StyleGAN2，通把相片的特点编号成空间向量，逆映射(Inversion Mapping)到隐室内空间 (Latent Space)。
在这个基础上对空间向量开展转换，再投射回图象，就能造成加减法年纪，变换性別的实际效果。
△彩色图库 GAN Inversion: A Survey
可是AgileGAN精英团队发觉，像StyleGAN2那般找寻最好的隐室内空间投射是难以实现的，由于适用真实图片的投射并不一定适用别的设计风格。
AgileGAN以StyleGAN2为基本开展改善，解决方案分成两一部分。
第一个是等级变分自编码器 (hierarchical Variational Eutoencoder,通称hVaE)。
在保证投射隐空间布局合乎初始伽马分布的与此同时，将原先的一个隐室内空间分为不一样屏幕分辨率的好几个隐室内空间，能够能够更好地编号图象中不一样层级的关键点。
第二个是以StyleGAN2的预训炼权重值逐渐，再次调整出一个特性认知的制作器。
包含不一样特性（如性別、年纪）的好几个转化成途径和好几个辨别器，以能够更好地完成依靠特性的风格迁移。
StyleGAN2制作器和特性认知的制作器这两个训炼环节是单独实行的，能够并行处理训炼。
那样分离实际操作不但降低了必须的训炼数据尺寸，还使风格迁移有着更高的协调能力。
但是应用小数据时辨别器非常容易多重共线性。解决方案是添加一个初期终止对策，一旦操控变形实际效果做到预估，就终止训炼。
这还不停，假如用上一阶健身运动技术性(First Order Motion)，AgileGAN还能够进行视頻的风格迁移。
字节跳动见习生一作
此外，AgileGAN或是个“见习生著作”，成形于一作宋果鲜在字节跳动见习期内。
宋果鲜，大学本科毕业于中国科技大学数学专业，现阶段已经贝德理工学院修读电子信息科学博士研究生。与此同时，他也是字节跳动美国AI试验室的见习生。
他的研究内容主要是人工智能算法和电子计算机图象处理，包含根据图象的三维面部复建/剖析、VR/AR运用这些。
因此 ，在AgileGAN眼中，宋同学们也是哪些的呢?
头发和头发，确实很出色了。
说起来，指不定之后就能在抖音直接玩上那样的GAN了。
如果迫不及待，创作者早已释放了体验版：
http://www.agilegan.com/
#见习生#字节跳动

相关评论 (0条)

暂无任何评论，欢迎您点评！

我要评论