谷歌Deepmind推出了Lyria,一种用于音乐生成的人工智能模型,旨在增强音乐家和艺术家的创作过程。
谷歌Deepmind与YouTube合作,推出了两个音乐人工智能实验:Dream Track是一个在YouTube shorts中进行实验的项目,Music AI Tools是一套面向艺术家、词曲创作人和制作人的工具。
Lyria模型旨在创建带有乐器伴奏和人声的高质量音乐。据谷歌Deepmind称,Lyria支持多种风格,从重金属到技术音乐再到歌剧。该公司表示,它可以在短语、诗句或更长的段落中保持复杂的节奏、旋律和人声。
谷歌Deepmind正在与YouTube进行Lyria的测试,作为Dream Track项目的一部分。这个实验的目标是探索艺术家创作音乐的新方法。用户在模型界面中输入一个主题和风格,从旋转木马中选择一个艺术家,并为YouTube短片创作一个30秒的配乐。
Lyria模型会以所选参与艺术家的风格生成歌词、背景音乐和人工智能生成的声音。参与的艺术家包括Alec Benjamin、Charlie Puth、Charli XCX、Demi Lovato、John Legend、Sia、T-Pain、Troye Sivan和Papoose。
谷歌Deepmind的研究人员还与YouTube音乐人工智能孵化器的艺术家、词曲创作人和制作人合作,探索生成式人工智能如何帮助创作过程。
他们正在开发一系列音乐人工智能工具,可以将音频从一种音乐风格或乐器转换为另一种,创建乐器和人声伴奏,并从头开始生成新的音乐或乐器片段。这些工具旨在帮助艺术家将其创意转化为音乐,例如从哼唱中创建吉他旋律。
Deepmind的SynthID标记了AI音频
Lyria生成的所有内容都带有SynthID标记,这是Google Cloud的Vertex AI上Imagen用于识别AI图像的相同技术工具包。这个水印对机器可见,但对人类不可见。
类似地,SynthID通过将音频波形转化为一个二维可视化图,显示声音的频谱随时间变化的方式,以一种对人耳不可听见且不影响听觉体验的方式标记AI生成音频。
Deepmind指出,无论音频素材是否经过修改(例如添加噪声、MP3压缩、加速或减速音轨),水印都应保持可识别性。
SynthID甚至可以帮助识别由Lyria生成的歌曲部分。谷歌Deepmind表示,这种“新颖方法”在音频领域尤其罕见。
几天前,YouTube发布了有关处理平台上人工智能生成的音视频内容的新规定。视频平台着重加强了标记要求,并要求对AI内容进行人工和机器两种方式的识别。
对于YouTube来说,音乐生成器还可以成为一种战略工具,以便更好地掌握平台上的AI生成音乐,让用户使用自己的工具,在生成内容(包括标记)上具有精确的控制能力。