人工智能虚拟人乐队 Auxuman 新近推出了首张专辑《Auxuman Vol. 1》,其中收录了 Yona、Mony、Gemini、Hexe 和 Zoya 等五位 AI 虚拟音乐人的作品。专辑中的歌曲听起来不错,每位虚拟歌手都有独特的音色和个性,这带来了令人惊讶的多样性。另外,他们还有自己的独特的 3D 动画形象。

人工智能和数据驱动的虚拟艺人正在开创音乐的新时代。不了解这个领域的人可能会感到惊讶,但这不是 AI 音乐的第一张专辑,2009 年,美国加州大学圣克鲁兹分校的音乐教授大卫·科普(David Cope)即用他创建的计算机程序创作了一张音乐专辑

随着人工智能技术的发展,AI 创作在音乐领域越来越有影响力,特别是生成对抗网络(GAN)的诞生使程序达到了新的高度,比如丹尼·卡尔松的 TidalCycles,Sevenism 的 NSynth,霍莉·赫恩登的 Spawn……音乐家们正在跟他们的 AI 伙伴一起推动一场音乐创作的革新。这场革新以发掘计算机的潜能来增强音乐家的创造力,同时赋予工具以辅助创作者的角色。

AI 的发展也催生了 AI 虚拟人的诞生。Instagram 上的流行音乐明星Lil Miquela以及更早的 Hatsune Miku 启发了这一概念。作为“虚拟影响者”,Miquela 拥有自己的 CG 形象,能够表达广泛的现实人类情感,从而模糊了虚拟和现实之间的界限。VR、AR 领域 AI 驱动的角色——比如,VR 体验《墙中狼》中的露西能够通过机器学习与用户建立情感关系,被描述为“一个拥有自己的生活和故事”的人——促进了 AI 虚拟人概念的成熟,并推动了产业的发展。

Auxuman 乐队便是在这样的基础上发展起来的。与 Lil Miquela 一样,Auxuman 乐队每一个成员都有着各自独特的声音、风格和外在形象;但是 Miquela 的音乐是由一组专业的工程师和歌手制作的,而 Auxuman 的工作人员使用互联网数据、人工智能和生成工具的组合来开发他们自己的原创作品。它是 AI 虚拟人和 AI 辅助创作者相结合的产物。

这个由 AI 驱动的虚拟音乐人的组合由著名的电子音乐作曲家 Ash Koosha 领导的虚拟演艺人员开发工作室 Auxuman 创建,Betaworks 提供资金。Koosha 出生在伊朗,目前生活在伦敦。他曾在虚拟现实中举办过现场演唱会,展示没有边界的世界。通过 Auxuman,他希望展示没有边界的人类及其在创意上的可能性。

Auxuman 使用文本、音乐和其他有影响力的资源,为每个角色培养了独特的个性和情感。据开发者称,这个想法是为了创造受人类行为启发的 AI 人格。

Yona是他们最早开发的角色之一,也是这个乐队的领导者,她被“喂养”玛格丽特·阿特伍德(Margaret Atwood)的作品,以及有关青少年和城市生活的出版物。最终,Yona 发展出一种天真、浪漫的个性,这相对于乐队其他成员是独有的。

Yona 的内核由一系列的生成软件组成,她可以生成句子、旋律,并通过一个复杂的文本到语音的过程来演唱。Koosha 表示,Yona 将成为终极的音乐计算智能或知识库,而她的声音也形成了一种给人以情感冲击的力量。

最早诞生的 Yona 无疑是这个故事的主角。在创建并训练了 Yona 之后,Koosha 和他的团队发现,他们创建的这种渠道可以通过许多不同的方式来塑造角色的心理、性格以及他们想说的话。

“一个角色是很难使结果多样化的,因为讲故事的本质是你想要熟悉一套性格特征和心理行为模式。”Koosha 说,“我们将其扩展到更多的测试中,我们开始说,‘哦,好吧,我们不仅需要这一种类型的人格,让我们来尝试具有侵略性、易怒的角色。’然后 Hexe 诞生了。然后,我们越来越多地发现了人格方面更有趣的领域。他们每个人都有自己的个性档案,这决定了他们要遵守什么样的规则。”

虽然“辅助人类”负责产生大部分的声音,Ash 和他的团队仍然需要帮助每个人完成他们的工作,职责有点像现实生活中乐队的制作人。

“我们有一系列的引擎。每个引擎负责生成音乐的一部分。比如说,一首歌需要什么?歌词,旋律,节奏,序列,音频纹理……所有这些都是由机器产生的。我们作为制作人和工程师,把所有这些碎片放在一起。所以它是完全数字生成的。”

对于 Auxuman 未来的发展,Koosha 阐述了团队对游戏流媒体以及最终的现场表演的兴趣。“我认为在游戏流媒体和云游戏中有很大的希望,我们可以将这些角色的生活融合到人们可以访问的平台中。因此这将是一个双向的情况。我认为他们的存在将是非常跨媒体的。”他说。

Ash Koosha

《墙中狼》执行制片人爱德华·萨奇(Edward Saatchi)也表达过相似的观点。他认为,AI 虚拟人未来将能够通过多种设备——比如电脑、VR 头显和智能手机——以各种方式访问。他指出,创造 AI 驱动的虚拟人物,将是内容产业的一种趋势,有广阔的前景。

现在,我们可以免费聆听 Auxuman 第一张专辑的 10 首歌,包括 Yona 的《One》、Mony 的《Marlene》、Gemini 的《IF Sad》、Zoya 的《Never Alone》和 Hexe 的《Subject》,以及其他五首 AI 创作的歌曲。虽然大多数“歌唱”可以被认为是更口语化的诗歌,但乐器和歌词的整体复杂性对 AI 生成的人格来说是非常令人印象深刻的。

Auxuman 已经有了一个个不错的亮相,我们期待他们在接下来能带来更有趣的东西。现在,这个 AI 虚拟乐队的音乐人每个月都会在 YouTube、Soundcloud、Spotify 和 Bandcamp 上发布新音乐。

【数字叙事 Lighting】