Nvidia 神经网络将简单的草图变成美丽的风景

Nvidia 神经网络将简单的草图变成美丽的风景
吸烟者的瀑布和健康人的瀑布

我们都知道如何画猫头鹰。 首先你需要画一个椭圆形,然后是另一个圆圈,然后 - 它变成了一只漂亮的猫头鹰。 当然,这是一个笑话,而且是一个非常古老的笑话,但 Nvidia 的工程师们试图让这个幻想成真。

新的发展,被称为 GauGAN,从非常简单的草图(非常简单 - 圆圈、线条和所有)创建华丽的风景。 当然,这种发展是基于现代技术——即生成对抗神经网络。

GauGAN 允许您创建丰富多彩的虚拟世界 - 不仅是为了娱乐,也是为了工作。 因此,建筑师、景观设计师、游戏开发人员——他们都可以学到有用的东西。 人工智能立即“理解”一个人想要什么,并用大量细节补充原始想法。

“在 GauGAN 的帮助下,设计开发方面的头脑风暴变得更加容易,因为智能画笔可以通过添加高质量图像来补充初始草图,”一位 GauGAN 开发人员说。

该工具的用户可以改变原有的想法,修改风景或其他图像,添加天空、沙滩、大海等。 您心中所想的一切,添加只需几秒钟。

使用数百万图像的数据库训练神经网络。 由于这一点,系统可以理解一个人想要什么以及如何实现他们想要的。 此外,神经网络不会忘记最小的细节。 所以,如果你示意性地画一个池塘和旁边的一些树,那么在景观恢复之后,附近的所有物体都会反映在池塘水的镜子里。

您可以告诉系统可见表面应该是什么——它可以被草、雪、水或沙子覆盖。 这一切都可以瞬间转化,让雪变成沙子,艺术家得到的不是白雪皑皑的荒地,而是沙漠景观。

“这就像一本填色书,上面写着树该放在哪里,太阳在哪里,天空在哪里。 然后,在完成初始任务后,神经网络会为图片制作动画,添加必要的细节和纹理,绘制倒影。 所有这一切都基于真实图像,”其中一位开发人员说。


尽管该系统缺乏对现实世界的“理解”,但该系统创造了壮观的景观。 这是因为这里使用了两个神经网络,一个生成器和一个鉴别器。 生成器创建图像并将其显示给鉴别器。 他根据之前看到的数百万张图片,选择最真实的选项。

这就是为什么生成器“知道”反射应该在哪里的原因。 值得注意的是,该工具非常灵活,配备了大量设置。 因此,有了它,您可以根据特定艺术家的风格进行绘画,或者只是玩弄快速添加日出或日落的效果。

开发人员声称该系统不只是从某个地方获取图像,将它们相加并得到结果。 不,所有收到的“图片”都是生成的。 也就是说,神经网络像真正的艺术家一样(甚至更好)“创造”。

到目前为止,该程序还不是免费提供的,但很快就可以在工作中对其进行测试。 这可以在目前正在加利福尼亚举行的 GPU 技术大会 2019 上完成。 能够参观展览的幸运者已经可以测试 GauGAN。

神经网络长期以来一直被教导参与创作过程。 例如,去年,其中一些 可以创建 3D 模型. 此外,DeepMind 的开发人员训练神经网络从绘图、照片和草图中恢复三维空间和物体。 为了重新创建一个简单的图形,神经网络需要一张图片;要创建更复杂的对象,则需要五张图片进行“训练”。

至于 GauGAN,这个工具显然会找到有价值的商业应用——许多商业和科学领域都需要此类服务。

来源: habr.com

添加评论