英伟达“神笔马良”GauGAN发布Windows应用程序,可导出PSD文件

丰色发自凹非寺量子位报道公众号 QbitAI

大家还记得致敬印象派大师高更的 GauGAN 吗?

只需简单画几笔,就能生成逼真风景画的那个:


图片

这个能让普通人秒变“神笔马良”的神器,现在又发布 Windows 版公测程序啦!


图片

长这样:


图片

这次它提供了 PSD 文件保存格式等功能,界面也是看着此前的网页版友好非常多:


图片

虽然但是……新的桌面版只能支持英伟达 RTX 系列的 GPU 了!


图片

有 RTX 系列的朋友可以往下看了。

如何使用?

下载安装包之前确保你的电脑符合以下具体要求:

操作系统:Windows 10GPU:GeForce RTX, NVIDIA RTX, Quadro RTX, TITAN RTX 显卡驱动:460.89 或更高版本

众所周知,它与其他画画工具最大的区别就是:让创作者用材料而不是颜色来作画。

目前程序一共提供了 15 种不同的材料,包括天空、山脉、河流石头等:


图片

并提供 9 种风格, 用来修改作品的整体滤镜:


图片

这和老版没啥区别。

笔刷、直线、油漆桶、取色器等可以调节粗细的工具都有,就不说了。

和 PS 很像,笔画会按不同材料被分别存成一个个图层,而桌面版这次帮你显示出来了。


图片

另外,它是实时渲染,左边画着右边就出结果,不像网页版还需要左等右等。

并且无论你在哪边画,两边都可以交互式更新(这个功能也可关闭)。


图片

最后,除了 PNG 格式,桌面版还可导出 PSD 文件。

并且左边(segmentation map)的图像也可以保存(虽然小编想不到这个存了有啥用,为了下次导入接着画吗)。

而存成 PSD 格式的话,最终输出图像会被存为背景图层,接着就可以拿到 PS 上继续创作、或者与其他艺术作品结合了。

ps.也可导入从该程序导出的 PSD 文件。

下面是更多作品示例:


图片


图片

背后的技术

英伟达去年三月首次公布了这个工具背后的技术 GauGAN,这一路又是上线网页版和又是开发桌面端,不得不令人想象它的应用前景。wangGauGAN 这个模型也是将语义分割图转化为逼真图像,它最大的创新点是提出了空间适应标准化(SPADE)。


图片

SPADE 算法作用在生成器中,它会接收上一层的输出和语义图作为输入,而上一层的输出经过 BN,语义图经过 resize 后通过一个卷积层,然后再将它通过两个卷积层后生成的结果分别和 BN 的做 wise 乘法和加法得到输出图像。


图片

这种处理方式能够有效地弥补 BN 带来的语义信息的丢失,使得生成的图像能够更加逼真。


图片

这样语义信号就可以作用于所有层的输出,然后再进行一下上采样调整就可以交给判别器了。

另外,为了让最终输出更加逼真,该模型在 NVIDIA DGX 系统上使用了超过 500 万张图像进行训练。

最后,有条件有兴趣的朋友可以脑洞大开,戳下方链接去尝试。

也不知道这认真的桌面版一出,会不会有人做出令人惊喜的应用来呢。

本文链接

发表评论

您的电子邮箱地址不会被公开。 必填项已用*标注