人工智能虚拟人乐队 Auxuman 的首张专辑《Auxuman Vol. 1》收录了 Yona、Mony、Gemini、Hexe 和 Zoya 等五位 AI 虚拟音乐人的作品。专辑中的歌曲听起来不错,每位虚拟歌手都有独特的音色和个性,这带来了令人惊讶的多样性。另外,他们还有自己的独特的 3D 动画形象。
人工智能和数据驱动的虚拟音乐人正在开创音乐的新时代。不了解这个领域的人可能会感到惊讶,但这不是 AI 音乐的第一张专辑,2009 年,美国加州大学圣克鲁兹分校的音乐教授大卫·科普(David Cope)即用他创建的计算机程序创作了一张音乐专辑。
随着人工智能技术的发展,AI 创作在音乐领域越来越有影响力,特别是生成对抗网络(GAN)的诞生使程序达到了新的高度,比如丹尼·卡尔松的 TidalCycles,Sevenism 的 NSynth,霍莉·赫恩登的 Spawn……音乐家们正在跟他们的 AI 伙伴一起推动一场音乐创作的革新。这场革新以发掘计算机的潜能来增强音乐家的创造力,同时赋予工具以辅助创作者的角色。
AI 的发展也催生了 AI 虚拟人的诞生。Instagram 上的流行音乐明星Lil Miquela以及更早的 Hatsune Miku 启发了这一概念。作为“虚拟影响者”,Miquela 拥有自己的 CG 形象,能够表达广泛的现实人类的情感,从而模糊了虚拟和现实之间的界限。VR、AR 领域 AI 驱动的角色——比如,VR 体验《墙中狼》中的露西能够通过机器学习与用户建立情感关系,被描述为“一个拥有自己的生活和故事”的人——促进了 AI 虚拟人概念的成熟,并推动了产业的发展。
Auxuman 乐队便是在这样的基础上发展起来的。与 Lil Miquela 一样,Auxuman 乐队每一个成员都有着各自独特的声音、风格和外在形象;但是 Miquela 的音乐是由一组专业的工程师和歌手制作的,而 Auxuman 的工作人员使用互联网数据、AI生成工具的组合来开发他们自己的原创作品。它是 AI 虚拟人和 AI 辅助创作者相结合的产物。
这个由 AI 驱动的虚拟音乐人的组合由著名的电子音乐作曲家 Ash Koosha 领导的虚拟演艺人员开发工作室 Auxuman 创建,Betaworks 提供资金。Koosha 出生在伊朗,目前生活在伦敦。他曾在VR中举办过现场演唱会,展示没有边界的世界。通过 Auxuman,他希望展示没有边界的人类及其在创意上的可能性。
Auxuman 使用文本、音乐和其他有影响力的资源,为每个角色培养了独特的个性和情感。据开发者称,这个想法是为了创造受人类行为启发的 AI 人格。
Yona是他们最早开发的角色之一,也是这个乐队的领导者,她被“喂养”玛格丽特·阿特伍德的作品,以及有关青少年和城市生活的出版物。最终,Yona 发展出一种天真、浪漫的个性,这相对于乐队其他成员是独有的。
Yona 的内核由一系列的生成软件组成,她可以生成语句、旋律,并通过一个复杂的文本到语音的过程来演唱。Koosha 表示,Yona 将成为终极的音乐计算智能或知识库,而她的声音也形成了一种给人以情感冲击的力量。
最早诞生的 Yona 无疑是这个故事的主角。在创建并训练了 Yona 之后,Koosha 和他的团队发现,他们创建的这种渠道可以通过许多不同的方式来塑造角色的心理、性格以及他们想说的话。
“一个角色是很难使结果多样化的,因为讲故事的本质是你想要熟悉一套性格特征和心理行为模式。”Koosha 说,“我们将其扩展到更多的测试中,我们开始说,‘哦,好吧,我们不仅需要这一种类型的人格,让我们来尝试具有侵略性、易怒的角色。’然后 Hexe 诞生了。然后,我们越来越多地发现了人格方面更有趣的领域。他们每个人都有自己的个性档案,这决定了他们要遵守什么样的规则。”
虽然“辅助人类”负责产生大部分的声音,Ash 和他的团队仍然需要帮助每个人完成他们的工作,职责有点像现实生活中乐队的制作人。
“我们有一系列的引擎。每个引擎负责生成音乐的一部分。比如说,一首歌需要什么?歌词,旋律,节奏,序列,音频纹理……所有这些都是由机器产生的。我们作为制作人和工程师,把所有这些碎片放在一起。所以它是完全数字生成的。”
对于 Auxuman 未来的发展,Koosha 阐述了团队对游戏流媒体以及最终的现场表演的兴趣。“我认为在游戏流媒体和云游戏中有很大的希望,我们可以将这些角色的生活融合到人们可以访问的平台中。因此这将是一个双向的情况。我认为他们的存在将是跨媒体的。”他说。

《墙中狼》执行制片人爱德华·萨奇(Edward Saatchi)也表达过相似的观点。他认为,AI 虚拟人未来将能够通过多种设备——比如电脑、VR 头显和智能手机——以各种方式访问。他指出,创造 AI 驱动的虚拟人物,将是内容产业的一种趋势,有广阔的前景。
现在,我们可以免费聆听 Auxuman 这张专辑的 10 首歌,包括 Yona 的《One》、Mony 的《Marlene》、Gemini 的《IF Sad》、Zoya 的《Never Alone》和 Hexe 的《Subject》,以及其他五首 AI 创作的歌曲。虽然大多数“歌唱”可以被认为是更口语化的诗歌,但乐器和歌词的整体复杂性对 AI 生成的人格来说是令人印象深刻的。
Auxuman 已经有了一个不错的亮相,我们期待他们在接下来能带来更有趣的东西。现在,这个 AI 虚拟乐队的音乐人每个月都会在 YouTube、Soundcloud、Spotify 和 Bandcamp 上发布新音乐。
[…] Ash Koosha 领导的虚拟演艺人员开发工作室 Auxuman 甚至创造了一个虚拟人乐队,不但推出了专辑,还每个月都会在 YouTube、Soundcloud、Spotify 和 Bandcamp […]