麻省理工学院和IBM的新A.I.图像编辑工具可以让你用神经元绘画


TTS Demo

无论是自动标记照片中的物体,还是使用iPhone的“纵向模式 ”调整照明和将背景与背景分开的能力,毫无疑问,人工智能是现代照片编辑工具中的强大力量。

但是,如果有可能更进一步,并使用最新的尖端技术来开发可能只是世界上最雄心勃勃(并且以其自己的方式,富有想象力)的绘画程序 - 那远远超出简单的触摸你现有的照片分析还是冷分析?

有了这样一个程序,所有人都需要做的就是去除一个难看的汽车系列,玷污他们家的照片将用刷子擦过它。仿佛通过魔术,车辆将被照片般逼真的草地银行所取代。想要从你的一个度假快照中消除那个摄影师吗?没问题:只需点击选择它们,它们就会消失,而不是看起来像是一直存在的电线杆。如何在一座古老教堂的照片中添加一个真正古老的门?点击即可完成。你明白了。

这就是麻省理工学院和IBM的研究人员正在努力进行一项他们称之为“GAN Paint Studio”的惊人的新技术演示。它的创造者称其提供了“用神经元绘画”的能力 - 指的是人工神经元机器学习神经网络 - 它是迄今为止最具潜在变革性的照片编辑工具之一。

它允许用户上传他们选择的图像,然后修改他们想要的任何方面,无论是改变对象的大小还是添加全新的项目和对象。可以把它想象成“深度假”一代的Photoshop ,尽管它目前更多的是概念验证而不是成品。

创意工具的未来

麻省理工学院 - IBM沃森人工智能实验室的研究科学家Hendrik Strobelt告诉Digital Trends说:“我们用这项工作创造的是一个展示未来创造性工具如何发挥作用的起点。” “我们从神经网络[称为] GAN开始,可以生成自己的特定类别的图像 - 例如,厨房图像 - 并分析网络的哪些内部部分负责产生哪个特征。这允许我们修改网络生成的图像。我们'吸引了'他们。我们添加的新颖之处在于,您可以上传自己的此类别图像,并使用不仅绘制笔划的笔刷修改它,而且实际绘制语义上有意义的单位 - 例如树木,砖块纹理或圆顶。“

mit和ibm绘制神经元ai 1 mit和ibm绘制与神经元ai 2

mit和ibm绘制与神经元ai 4 mit和ibm绘制与神经元ai 7

GAN或Generative Adversarial Network是生成人工智能中最强大的工具之一。 GAN将两个人工神经网络相互对立。一个网络生成新图像,而另一个网络尝试确定哪些图像是计算机生成的,哪些不是。随着时间的推移,这种生成性的对抗过程使“生成器”网络变得足够好,可以创建图像,每次都可以成功地欺骗“鉴别器”。 GAN是人工智能艺术背后的技术,该艺术品在2018年的佳士得拍卖会上以高价出售

由麻省理工学院和IBM研究人员开发的系统展示了一些简洁的能力。有点像深度梦想 ,几年前谷歌研究人员开发的图像生成工具,它显示了对哪些图像组合在一起的令人印象深刻的理解。通过对大量图像存档进行培训,可以了解管理对象之间关系的基本规则。例如,要求它在天空中添加一个对象,它不会绘制一个窗口 - 因为它知道那里通常不会(或曾经)找到窗口。

正如Strobelt指出的那样,GAN Paint Studio尚未准备好迎接黄金时段。虽然公众可以使用它 ,但还有更多工作要做。值得注意的是,演示版本目前是低分辨率的。然而,它确实展示了该技术的巨大潜力。

挑战想象力

“技术最有趣的部分实际上是在你的想象力受到挑战时,”Strobelt说。 “尝试在Palazzo Vecchio图像上添加一扇门;如果你知道这个地方,那真是令人兴奋。该系统远非完美,并非每个图像都可以同样良好地修改。仍然需要研究如何优化所有零件。例如,当GAN模型试图表示输入模型时,它可能很好地使用错误的语义单元来重现特征 - 它[可能]只是从树单元生成一个门。弄清楚它何时以及如何做对或错是实际上非常有趣的未来工作。“

正如GAN随着时间的推移变得更好,因此Strobelt认为GAN Paint Studio的应用程序将会开放。 “显而易见的第一个想法是使用这些语义画笔和橡皮擦的照片编辑器,”他说。 “例如,这可以帮助您编辑度假照片。它还可以让建筑师快速创建嵌入他们的建筑物渲染的变化。游戏设计师可以[也用它来]更快地修改关卡图。“

如果可以将这种技术添加到视频效果中,那么它也会非常强大。这样只需按一下按钮就可以将物体放入镜头中。如果导演意识到他们忘记在完成的场景中包含对情节至关重要的背景项目,则可以快速添加 - 无需当前昂贵且耗时的视觉效果处理。

Strobelt决定说他不认为GAN Pain Studio是真正的,自主创造性的 。 “不,”他果断地说道。 “我认为这是一种先进的工具,可以帮助那些认为自己没有创造力的人来挑战这种想法。”

那么,什么创造力?与我们生活中的许多其他方面一样,例如我们认为只有人类可以做的工作 ,似乎人工智能已准备好提出重大问题。

Previous Entries 戴尔7月销售第4期:XPS笔记本电脑,显示器和4K电视优惠 Next Entries 微软刚刚取消了Windows 1.0的发布,没有人知道原因

發表評論