本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请干系出处。
这下竟然是万物皆可JOJO化了!
蓝本就神气高涨的马斯克,下一刻更是仿佛要告成“我不做人啦!”
宇宙名画蒙娜丽莎精巧优雅的含笑,似乎也变得JO灼了起来……

再来个合并次元的……团长你在做什么啊团长!

而上头这些后果唯一绽开网页Demo,点击上传恣意土产货图片就能罢了。
这就一下子引来了无数网友的围观,不仅推特热度800+,在线试玩的抱抱脸(Hugging Face)还排起了队,一张相片最多要等四五分钟。

还不仅JOJO一种立场,还有迪士尼风、强者定约风……输入恣意一种立场的图像,都不错将这种立场快速应用到新的图片上:

看这楚楚恻隐的卡姿兰大眼睛,以及灵活无邪的公主笑,我只想说……老马,快收了神通吧!
在线JO化恣意人像看了上头的演示,是不是我方也想整一个JO化脸?
咱们用建设者提供的Hugging Face和Colab来试一下。
最初是在线网页版的Hugging Face,点击左边框中空缺处就能把恣意土产货相片丢进去:

再点Submit,等个十几秒……站在你眼前的不是他人,而是ko no肌肉金轮大司马哒!

这个才调点通达顺就能即传即玩。不外天然苟简快捷,但偶尔如故要列队等个几分钟:

是以激烈安利colab版块,向test_input文献夹中导入恣意图像,比如咱们这里放入一张冰冰,然后点击启动:

再不时启动底下的生成模块:

把我的冰冰女神JOJO化,这也在你的认为之中吗GAN !

而且,colab中还提供了另一种玩法:导入一张恣意立场的图片,我方制作一个XX立场生成器。
嗯……这不得整一个提瓦特大陆版的马斯克?

上传一张老马的慎重图:

再在style_images文献夹中上传一张原神气度的人像:
(上传偏二次元立场的图像可能会出现“找不到人脸”的情况,需要多试几张图)

然后进行微调,恭候几分钟,再点启动:

这个强劲的目光,再配上原图里老马的阿谁瞭望抱胸的姿势,嗅觉下一秒就能来句天动万象了!

那么,这种才调到底是奈何做到只参考一张图片,就能完勤学习其美术立场,再将其愚弄到其他图像上呢?
咱们沿途来望望这个叫做JoJoGan的模子。
它主如若通过GAN回转(inversion)来获得类似立场的,主要使命进程分四步:

建设者暗示,这一模子相等热沈零监督下的立场细节,况且在不同立场中具有考究的通用性,大略应答泛化到其他立场的图像上。
从二次元到本事宅建设者Min Jin Chong亦然咱们的老熟人了,之前仍是搞过二次元爱妻生成器:

Min Jin Chong自己本科毕业于美国伊利诺伊大学厄巴纳-香槟分校(UIUC),后不时留校读博,主要相干边界为机器学习、计较机视觉和图像生成。
此前他曾在字节实习过3个月,当今与两位同校学生沿途创立了一个叫做Style Space的前锋购物应用,允许用户在诬捏空间中试用和购买居品。

而他的导师David Forsyth则是一位CV边界的大牛,曾与Jean Ponce著有计较机视觉经典课本《Computer Vision:A Modern Approach》:

Hugging Face在线试玩: https://huggingface.co/spaces/akhaliq/JoJoGAN
colab在线试玩: https://colab.research.google.com/github/mchong6/JoJoGAN/blob/main/stylize.ipynb#scrollTo=LCLWiXoXwcJb
论文通顺: https://arxiv.org/abs/2112.11641