当前位置
主页 > 产品中心 > 产品四类 >
抖音AI特效火遍全网,真人秒变漫画,吴亦凡PDD戚薇都玩上瘾了
2022-06-11 09:29
本文摘要:金磊 发自 凹非寺量子位 报道 | 民众号 QbitAI这两天,抖音上一款特效——「变身漫画」,简直火到不行。从明星到路人,堪称全民到场,来看下效果吧~首先登场的是张艺兴和戚薇。可以看到,这个特效基于人物的面容,很好的转换成了二次元漫画气势派头。 尤其是眼睛的处置惩罚,把张艺兴慵懒的眼神、戚薇水汪汪的大眼睛,诠释的淋漓尽致。固然发型也都是「满分转换」,分叉、造型等细节可以说是丝绝不差了。

亚搏手机版app下载

金磊 发自 凹非寺量子位 报道 | 民众号 QbitAI这两天,抖音上一款特效——「变身漫画」,简直火到不行。从明星到路人,堪称全民到场,来看下效果吧~首先登场的是张艺兴和戚薇。可以看到,这个特效基于人物的面容,很好的转换成了二次元漫画气势派头。

尤其是眼睛的处置惩罚,把张艺兴慵懒的眼神、戚薇水汪汪的大眼睛,诠释的淋漓尽致。固然发型也都是「满分转换」,分叉、造型等细节可以说是丝绝不差了。抖音网友们直呼:终于看到这个特效啦!早就想看偶像的漫画风,圆梦了!可爱的PDD同学也到场了进来,这个漫画风让他变得少了些油腻,多了份清纯,好评!淘气的网友竟发出疑问:安西教练?固然,刷了众多视频之后,你会发现这个特效并不是适合所有人,建议以下2类人慎用此特效。第一类是颜值过高,这里的高是指原来长相就像「从漫画里走出来」的人,例如吴亦凡。

原来吴亦通常浓眉大眼、五官立体,转换后却显得「单薄」了不少。第二类是彪形大汉……话不多说,来感受一下这个画风……嗯……原来的味道,全没了……引得网友直呼:你为什么要拉过来?发我男朋侪看一下,让他认清社会的现实。突破「次元壁」的关键技术那么如此有趣的特效,是怎么做到的呢?虽然现在并没有看到专门对应此特效的研究,可是有关「气势派头迁移」的研究,并不是新鲜的事物了。而在众多研究中,打破二次元和三次元的关键技术,就是GAN (反抗生成网络)。

用GAN实现漫画风早在去年,港中文、哈工大和优图的一篇最新研究,可以将人脸照片转化成如同手绘版的卡通图,甚至还能反向转换,将二次元的卡通图像,转换成现实中可能的样子。将真实人脸照片转化成卡通图像,效果逾越了CycleGAN。还能转换成日漫画风,自带了热血青春的气息。

这项研究使用到的技术叫做Landmark Assisted CycleGAN,它使用面部标志特征来界说一致性损失,指导在CycleGAN中训练局部判别器。整体结构如下:整体来说,这个转换历程分为3步。

首先,生成器先凭据CycleGAN生成一张粗拙的卡通人脸。随后,模型凭据第一步生成的图像,生成一个预训练回归量(regressor),来预测面部landmark,劈面部的关键点举行标志。

最后,通过局部和全局两种判别器,研究人员细化在卡通图和对应真实图像中的人脸特征。在这个阶段,强调了landmark的一致性,因此最后的生成生成效果传神且有辨识度。

用GAN实现油画风例如MIT和IBM沃森团结实验室,公布的名为AI Portraits Ars的工具,只要给定一张图像,就能秒变「文艺再起款」的油画风。值得一提的是,这不是气势派头迁移,而是GAN自己画出来的。不止能拿着照片作画,看着视频也没问题,例如1960年的老影戏《惊魂记》。这项技术里GAN的生成器就像是个画师,而判别器就充当鉴赏家角色,卖力识破生成器的画不是人类作品。

生成器里有个潜在空间,内里有千千万万的AI画像,都是从人类画作里,用差别的向量修改而成。然后,要按着照片生成画像,就把一个向量 (Latent Vector) ,映射到千万AI画像里和照片最靠近的一幅。团队还设计了一个Inverter,可以从照片里近似出一个向量,用来找到潜在空间里最合适的谁人向量。

用GAN让纸片人活起来除此之外,GAN甚至还可以让2D形象酿成3D“活物”。例如来自华盛顿大学的照片叫醒 (Photo Wake-Up)技术,可以让你体验到麻瓜的神奇邪术。

它可以让你最爱的体育明星从照片里跑出来:还能赋予二次元角色新气力:还可以借此把角色们AR/VR化,只要动动手指,它们就能泛起在你身边的世界:这项研究整个操作历程,其实只用了三步:第一步是支解纸片人:使用现成的图像支解算法,将画中人的躯干、四肢支解,再用人体姿态预计,提取画中人的2D骨骼关键点,忽略厚重的衣服,拟合出一种半裸的可塑3D模型,称为SMPL模型。第二步是是细化纸片人3D模型:先将SMPL模型映射到2D世界瞄准轮廓,调好再次转换成3D模型确保准确度。

最后一步中,研究人员用CMU的Mo-cap人体行动数据集喂给模型。让二次元走进现实除了抖音最近火爆的「变身漫画」特效外,隔邻岛国的一项「3D姿态追踪」也火了。

可以让漫画人物追随着你的行动,一起翩翩起舞,好像二次元人物走进了现实。使用「真人模型」也是可以的。而且这项技术可在线体验哦(链接见传送门)。

这样一来,和你心仪的二次元工具,在现实中共舞便不再是梦!若是把明星作为模型输入的一部门,是不是也可以跟偶像共舞了?咦?似乎可以预见娱乐平台的下一个爆款特效了。传送门3D姿态追踪项目地址:https://github.com/digital-standard/ThreeDPoseTracker参考链接:https://mp.weixin.qq.com/s/5covdsSaNBIAqORbtfHa4whttps://mp.weixin.qq.com/s/VU06PqZ4OaLxpjLwIObWZwhttps://mp.weixin.qq.com/s/gXonxan5baaJ6jwEcY9ILg— 完 —量子位 QbitAI · 头条号签约关注我们,第一时间获知前沿科技动态。


本文关键词:亚搏手机版app下载,抖音,特效,火遍,全网,真人,秒变,漫画,吴亦凡

本文来源:亚搏手机版app下载-www.sfddu.com

联系方式

电话:051-931908321

传真:0327-34354170

邮箱:admin@sfddu.com

地址:四川省凉山彝族自治州维西傈僳族自治县来人大楼1642号