在修图这件事上,Photoshop有着崇高的地位。
前一阵子,流传过这样一个段子:“甲方不要PS!让我们用Photoshop做!”足以说明开头的结论。
然而,Photoshop不一定是最好的选择~
这次英伟达,就搞出了一个新AI,拥有技惊四座的P图本领。
比方,给你这样一张图。
嗯,对,就是这样,画面严重缺失。请用AI把这张图修复一下,P得要看起来像原图一样真实。
难不难?这画面上是啥都不一定能看清。
普通的AI也就能自动修补成下面这样或那样。
英伟达的AI呢?可以P成这样:
对比下原图。
再来一个,还是同样画面确缺失严重。
普通的AI也就能自动修补成下面这样或那样。
英伟达的AI,可以P成这样:
再对比下原图。
英伟达的AI是不是更赞?
但,这个技术有什么用?
其实与大段大段的补全缺失画面相比,快速且优秀的进行局部P图,才是这个技术真正发挥实力的地方。
静态展示不过瘾,动态展示才更令人惊叹。
比如下面这个动图,把左图中的人、线、红旗、石头、棍子都P掉,应该怎么做?很简单,就是直接涂抹掉,然后AI就自动修复了。
还比如这样。
其实这个AI的本事,就是能在一片空白之中,更好的填补上缺失的内容。
极端情况,比方处理人脸时候,眼睛被遮蔽了。
英伟达的AI就能重新补上一双眼睛,当然不可能是原来那个人的眼睛,但是至少能弥补的也算相对完美吧~
以及,对于也能让头发更浓密。
也能让发际线更高~
英伟达的新AI是真么做到的?
答案就在这家公司新发布的论文里。这篇论文标题:Image Inpainting for Irregular Holes Using Partial Convolutions 。
英伟达的研究团队提出了一种新的模型,使用部分卷积的方法,其中卷积被掩蔽,并且仅基于有效像素进行重新归一化等处理。
论文中,还与现有其他方法进行了对比,有很多公式。
比如这种。
还有这种。
详细的方法和原理,可以前往阅读论文,地址:
https://arxiv.org/abs/1804.07723
总而言之就是一句话:我不是针对谁,在座的都是……
最后顺便提一下,这篇论文的一作Guilin Liu,在加入英伟达之前,还曾在Adobe Research实习过。
Adobe,就是搞出Photoshop(和一堆其他软件)的那家公司~
— 完 —
“