雷锋网 AI 科技评论按：能够迭代进化、模仿指定数据特征的GAN（生成式对抗性网络）已经是公认的处理图像生成问题的好方法，自从提出以来相关的研究成果不少，在图像增强、超分辨率、风格转换任务中的效果可谓是惊人的。 （具体可以参见Valse 2017 | 生成对

　　雷锋网 AI 科技评论按：能够迭代进化、模仿指定数据特征的GAN（生成式对抗性网络）已经是公认的处理图像生成问题的好方法，自从提出以来相关的研究成果不少，在图像增强、超分辨率、风格转换任务中的效果可谓是惊人的。 （具体可以参见Valse 2017 | 生成对抗网络（GAN）研究年度进展评述 - 雷锋网 ）

　　利用GAN达到图像超分辨率和风格转换示例今年也有利用GAN做的简笔画到图像转换模型pix2pix（代码地址https://github.com/phillipi/pix2pix ，demo地址https://affinelayer.com/pixsrv/）。除了下图转换猫的，还有建筑物的、鞋子的、包包的，模型非常有想象力，随便画也没关系，感兴趣的读者可以自己到demo地址里画画看。

　　demo中用把线条转换成猫的示例

　　GAN能生成艺术作品吗？GAN既然已经有如此的图像生成能力了，我们能不能用GAN生成艺术作品呢，毕竟许多现代艺术作品看照片好像也并不怎么复杂，比如下面这幅；超写实主义的就更不用说了。

　　蒙德里安《红黄蓝的构成》然而，要创造出一副人类觉得有艺术价值的作品并没有那么简单。人类喜欢创新性的作品，人类不喜欢完全模仿的作品；《蒙娜丽莎》和《兰亭集序》只有原作者的原版才被认可是世界艺术瑰宝，后世的人就算基于它们创作，也要有自己的创新，才能带来新的艺术价值，才能被观赏者认可。

　　根据GAN的基本结构，鉴别器D要判断生成器G生成的图像是否和其它已经提供给鉴别器D的图像是同一个类别（特征相符），这就决定了最好的情况下输出的图像也只能是对现有作品的模仿，如果有创新，就会被鉴别器D识别出来，就达不成目标了。上面几个GAN的例子就能体现出鉴别器D带来的这个特点，用GAN生成的艺术作品也就注定缺乏实质性的创新，艺术价值有限。

　　那么，能不能让GAN具有一些创新的能力，让这些创新有艺术价值、带有这些创新的作品还能够被人类认可呢？罗格斯大学艺术与人工智能实验室、Facebook人工智能研究院（FAIR）、查尔斯顿学院艺术史系三方合作的这篇论文就通过CAN（Creative Adversarial Network，创造性对抗网络）给出了一种答案。神经网络库Keras的作者Fran？ois Chollet也在Twitter上推荐了这篇文章。

　　先看看作品如何

　　CAN模型生成的一些艺术作品可以看到，生成的艺术作品风格非常多样，从简单的抽象画到复杂的线条组合都有，内容层次也有区分。论文中也有对比测试结果，CAN生成的作品不仅比GAN生成的更讨人喜欢，甚至来自巴塞尔艺术展的人类艺术作品都比不上CAN。（具体数据看后文）

　　如何认识艺术创新刚才说到，艺术作品需要有创新性，CAN中的C就是Creative，创新性的意思。那么创新性要如何衡量呢、如何达到呢？

　　以往基于GAN的图像生成方法研究中，人类可以把训练好的网络生成的图像和客观事实相对比（超分辨率、图像补全问题中）或者根据经验判断（风格转换问题中），用来衡量网络的效果；也有过一些更早期的算法，让人类作为训练反馈的一环，引导网络的训练过程。但是对于这次的课题需要设计一个能自动训练和生成、还要衡量作品的创新性的系统而言，以往的方法就起不到什么帮助。

　　同时，在作者们看来，为了能模仿人类艺术创作的过程，算法中很重要的一部分就是要把算法的创意过程和人类艺术家以往的艺术作品联系起来，像人类一样把对以往艺术的理解和创造新艺术形态的能力整合在一起。 为了能够想办法找到一个能够衡量创新性、参与迭代训练的创新性指标，作者们找来了一组艺术理论。

　　D.E.Berlyne认为，从生理心理学的角度讲，人类的状态中有一种叫做“唤醒水平”的指标，它可以衡量一个人有多警醒、多兴奋；唤醒水平可以从最低的睡觉、休息，一直到暴怒、激动。而一副作品具有“唤醒潜力”的总体特质，它可以提升或者降低观者的唤醒水平；它是作品新颖性、意外性、复杂性、多义性和疑惑性高低的综合体现，这几个属性越高，作品的唤醒潜力就越高。

　　Colin Martindale（1943-2008）提出过一个假说，他认为在任一时刻，创意艺术家们都会尝试增加他们作品的“唤醒潜力”，这就是一种拓宽创作习惯边界的方法。但是，这种增加动作必须使得观察者的负面反应尽可能小（尽量使观察者不付出额外的努力），否则过于激进的产品就会受到负面的评价。

　　Colin Martindale还提出过一个假说，他认为当艺术家探索艺术风格的更多作用的时候，转换艺术风格就会有提高“唤醒潜力”的作用。

　　这组理论只是解释艺术创新的理论中的寥寥几个，但是它们综合起来给出了两个具有计算性的、可以用于迭代训练的指标：

　　创新作品的创新程度不能过高，观者不认为作品是艺术作品的可能性应当尽可能小；

　　新的艺术风格就是创新的体现。

　　CAN网络的构建根据提炼出的这两个指标，论文中基于GAN的原型构建了这样一种新型的对抗性网络CAN。

　　CAN模型的系统框图首先，对于“指标1：创新作品的创新程度不能过高，观者不认为作品是艺术作品的可能性应当尽可能小”，就可以转换为经典的对抗性网络，G生成图像，经过艺术作品训练过的D判断G生成图像的是不是艺术作品。这样的对抗性网络生成的图像就已经可以被人类看作是艺术作品。

　　然后，论文中的模型还根据“指标2：新的艺术风格就是创新的体现”增加了一部分新结构用来处理艺术风格。

　　论文中使用了25类不同的带标签艺术作品用于D的训练，包含了抽象印象派、立体派、现代派、巴洛克、文艺复兴早期等等风格的共7万5千多幅。然后经过训练的D除了要反馈一幅图像“是否是艺术作品”外，还要反馈“能否分辨图像是哪种艺术风格”。G然后就会利用D的反馈生成尽量难以分辨艺术风格的图像――难以归类到现有分类中的，就是创新了。

　　“是否是艺术作品”、“是否难以分辨艺术风格”是两种对立的信号，前一种信号会迫使生成器G生成能够被看作的艺术的图像，但是假如它在现有的艺术风格范畴中就达到了这个目标，鉴别器D就能够分辨出图像的艺术风格了，然后生成器就会受到惩罚。这样后一种信号就会让生成器生成难以分辨风格的作品。所以两种信号就可以共同作用，让生成器能够尽可能探索整个创意空间中艺术作品的范围边界，同时最大化生成的作品尽可能游离于现有的标准艺术风格之外。

　　这也就是论文标题「CAN: Creative Adversarial Networks GEnerating “Art” by Learning About Styles and Deviating from Style Norms」的含义，创造性对抗网络可以学习艺术风格，然后背离这些现有的风格进行艺术创作。