深度学习音乐艺术!DeepMind推出Lyria模型,为用户提供精准音乐创作体验

   发布时间:2023-11-21 15:24

【智快网】11月21日消息,DeepMind最近发布了一款名为Lyria的音频模型,该模型被设计用于生成带有乐器和人声的高品质音乐。与此同时,DeepMind还与YouTube合作,推出了一款名为Dream Track的音乐创作工具,旨在使视频创作者更有效率地将创意转化为作品。

研究人员介绍了通过AI模型生成音乐所面临的挑战。音乐本身具有极高的信息密度,每秒可能包含多个节拍、音符和和声,因此相较于生成语言(文字转语音),生成音乐更为复杂。维持长音乐序列中的连续性对AI模型而言也更为困难,因为模型需要在不同的乐句、诗节和长段落中保持音乐的流畅性和一致性。

Lyria模型针对这些挑战进行了尝试,最大的特点是能够生成包含乐器和人声的高品质音乐。此外,Lyria模型还擅长进行音乐变换和延续的任务,使其能够基于现有音乐片段生成出风格新颖或统一的后续片段。研究人员表示,Lyria模型具有细致的微调选项,可以满足专业音乐创作的需求,同时也适合业余用户使用。

目前,Lyria模型已经应用在YouTube的短视频功能"Shorts"中,并集成在YouTube的实验音乐创作工具Dream Track中。用户可以使用Dream Track生成多样化的配乐,并选择艺术家的音乐风格,如Charlie Puth、Charli XCX、Sia等,以创造全新演绎的作品。

据悉,在Dream Track中,用户只需简单输入主题,然后选择艺术家,即可生成30秒的配乐、歌词、伴奏等内容。

DeepMind表示,他们正在广泛探索AI在音乐创作领域的应用。未来,用户将能够通过哼唱让AI生成完整歌曲,将古老的MIDI音乐转换为Remix版本,或为音轨添加各种乐器伴奏。

Lyria模型生成的所有内容都会加上SynthID水印标记,这是一种辨识歌曲是否由AI生成的机制。研究人员表示,带有“声音水印”的音频即便经过噪音添加、MP3压缩,甚至调整音调速度,也能维持可检测性。Lyria模型可以通过检测歌曲中的SynthID来确认由Lyria模型生成的部分,从而更容易辨别音乐主题内容,方便生成后续音乐片段。

 
标签: 谷歌
 
更多>同类内容
全站最新
热门内容
本栏最新
 
智快科技微信账号
ITBear微信账号

微信扫一扫
加微信拉群
电动汽车群
科技数码群