人工智能合成音乐来了,这是机遇还是挑战?
【编者按 】2016年12月7日,基于人工智能合成技术的Jukedeck MAKE面市,可以订制专属的歌曲。2017年1月22日,《纽约时报(网络版)》刊载《从铃声到流行歌曲,音乐界的福音:人工智能》一文,通过采访Jukedeck的创始人及音乐家,介绍了Jukedeck背后的人工智能合成技术、目前主要的人工智能合成音乐项目、人工智能对于音乐家的影响,以及人工智能合成音乐将来的发展之路。
本文由暴娱Flaneur编译,作者Alex Marshallian;经亿欧编辑,供行业人士参考。
以下为暴娱君编译,内容略有删减。
在伦敦的一个会议室里,Patrick Stobbs用他的智能手机播放了一首歌曲,以展示他的新公司 Jukedeck 走在 音乐 的最前沿的成果。这首曲子听起来就像80年代视频游戏的原声带,Stobbs也略显尴尬的说:“这是我们两年前的成果”。
紧接着,他又播放了一首轻柔的钢琴曲,“这是我们现在的成果”。这首曲子旋律简单,尽管隐约有一丝悲伤,但不可否认,它可以作为医保之类广告的背景音乐。
这首歌曲并非Stobbs自己所写,也非他请 作曲 家创作的。Jukedeck是不断涌现的利用 人工智能 合成音乐的公司之一:这些公司仿照大脑,建立了人工神经网络模型工具,电脑会敲击这些工具(以制作音乐),使电脑像孩子一样通过实际操作来学习。目前看来,这些业务还未引起音乐家的焦虑。
Stobbs坦言:“在我们看来,这个系统仍然只是一个雏形,它只学到了一定量的音乐”,但他很快又暗示道,他希望Jukedeck的音乐可以不断升级推进“没有任何条例规则表明电脑无法达到和人类一样好的程度。”
利用机器写音乐并非什么新鲜事 。
早在20世纪50年代,作曲家Lejaren Hiller就通过电脑为弦乐四重奏创作了“Illiac”套曲,这是第一首电脑合成的配乐。从那时起,无数研究人员共同推动着人工智能合成音乐的发展。现在,有一部分初创企业试图将人工智能合成音乐商业化,并涵盖从铃声到潜在流行歌曲的一切音乐。例如, Jukedeck在尝试将音轨出售给需要为视频、游戏或广告添加背景音乐的客户。
而且,Jukedeck仅向大型企业收取21.99美元的费用,这个金额只占聘请音乐家很小的一部分。虽然Stobbs先生不愿透露Jukedeck卖了多少歌曲,但他表示可口可乐英国分公司是他们每月的订阅用户。
Jukedeck的电脑敲击仿照大脑建立的人工神经网络模型工具,使电脑像孩子一样通过实际操作来学习。
技术巨头们也纷纷参与到人工智能的浪潮中。
2016年6月,Google Brain发布Magenta项目,该项目旨在让电脑合成具有冲击力、艺术性、并且充满惊喜的音乐,但到目前为止,投入产出比并不理想。2016年9月, 谷歌 旗下的英国人工智能公司DeepMind发布了一项实验的最终结果,该公司最初进行这项实验完全是出于兴趣。
DeepMind将钢琴曲样本放入WaveNet系统中以生成诸如演讲类的音频,虽然DeepMind并未披露该系统是如何运作合成音乐的,但该系统利用初始音频所合成的一段10秒钟的爵士乐颇为前卫。 IBM 也成立了一个名为“Watson Beat”的研究项目,音乐家可以通过它来改变自己的曲风,使歌曲听起来具有中东风格或者“幽灵风”。
作为科技公司,Jukedeck的创立有些令人吃惊。
2012年,29岁的Stobbs与同龄作曲家Ed Newton-Rex共同创办了Jukedeck。早先,他们都是剑桥大学国王学院的唱诗班成员,Rex后来继续在剑桥大学深造学习音乐。正是在剑桥大学,Rex第一次了解到人工智能可以合成音乐。从剑桥毕业后,Stobbs和Rex成立了一个男子合唱乐队(“那是一个糟糕的想法”,Stobbs说),并励志经营一家唱片公司。但在2010年,Rex参加了一场由他女朋友母校哈佛大学所举办的计算机科学讲座,讲师口中的编码听起来简单而直接,这勾起了雷克斯对于人工智能音乐的研究记忆。在回程飞机上,Rex决定成立Jukedeck,将人工智能音乐与编码合二为一。
Jukedeck的系统将成千上百首曲子录入人工神经网络,随后该网络对这些曲子进行分析,以计算出一段音符接续另一段音符的概率以及和弦的搭配,进而合成一首风格相近的作品,最后,自动生产程序会将其转换成音频素材。不同风格的曲子拥有不同的网络,从民歌风到听起来像商务会议上常出现的绚丽电子音乐的“企业风”。最近,Jukedeck才开始尝试通过人工神经网络输出、合成音频。这使得音轨声音更自然和多样,换句话说就是更人性化。
其他尝试人工智能合成音乐的公司更倾向于让音乐家直接参与整个制作。
例如巴黎的索尼计算机科学实验室,该实验室认为音乐家是其Flow Machines项目的关键所在,该项目已获得欧洲研究理事会的资助。该项目的出发点是让计算机谱写流行音乐,实验室主任François Pachet表示“大多数人工智能运用都专注于古典音乐,但我一直认为合成短小、引人入胜的旋律可能才是最难的”,他又补充到:“极具冲击力的歌曲实际上是一个罕见且脆弱的对象,只有当所有维度的东西都正确时它才能运作,这些维度包括旋律、曲调、声音、歌手的穿着以及围绕它所产生的如‘你为什么写这首歌? ’ 这样的对话,但目前还没人能完美诠释这些因素,我对此也很感兴趣。”
Flow Machine的主系统是一个合成工具,它的工作原理与Jukedeck相似:利用计算机来分析从披头士音乐到劲歌热舞的所有配乐,从中学习并进行自主创作。然而,该项目输出的音频随后会交于音乐家,这些音乐家可以任意改变或丢弃这些音频,并且免费。(关于唱片公司如果要发行这些音频的法律责任仍在洽谈之中。)Pachet先生认为这赋予了音乐家一种代理人的角色,因为Flow Machine的系统并不知道自身为什么要做音乐,该系统也没有任何目标和任何欲望。
目前大约有20个使用这个系统的记录,Pachet先生透露:最近有人在音乐会上演奏了他们利用该系统合成的歌曲,他正在与一些知名团体洽谈,如独立乐队凤凰,希望2017年能发行几张(人工智能合成音乐)专辑。
音乐家们对人工智能合成音乐也青睐有加。
法国摇滚音乐家Mathieu Peudupi(常称作Lescop)说:“如果没用人工智能,我永远无法创作这些歌曲,它带领我进入了一个全新的境遇,这就像和乐队成员一起创作一样,虽然我会忽略乐队成员大部分的建议,但在这个世界上哪有听同伴建议的歌手?”Mathieu忍不住大笑。
Pachet先生和Lescop先生都认为听众不会完全接受电脑制作的音乐。Lescop表示:“音乐迷爱上的是音乐家,你不可能爱上一台电脑。”但Jukedeck的创始人Rex对此持保留意见,他认为:“人工智能改变了我们听的方式,尤其是当计算机最终对音乐有足够的理解,从而能在现实中例如打游戏或跑步时做出响应的时候。录制的音乐很棒,但它是静态不变的:例如你在玩游戏时,Hans Zimmer并不会坐在你身边谱写乐曲。 我认为能够在现实中做出响应的人工智能系统将是未来音乐的重要组成部分。 ”