智快网
快讯 行业 产业 汽车 科技 AI+ 热点

深度学习音乐艺术!DeepMind推出Lyria模型,为用户提供精准音乐创作体验

2023-11-21来源:智快科技编辑:芳华

【智快网】11月21日消息,DeepMind最近发布了一款名为Lyria的音频模型,该模型被设计用于生成带有乐器和人声的高品质音乐。与此同时,DeepMind还与YouTube合作,推出了一款名为Dream Track的音乐创作工具,旨在使视频创作者更有效率地将创意转化为作品。

研究人员介绍了通过AI模型生成音乐所面临的挑战。音乐本身具有极高的信息密度,每秒可能包含多个节拍、音符和和声,因此相较于生成语言(文字转语音),生成音乐更为复杂。维持长音乐序列中的连续性对AI模型而言也更为困难,因为模型需要在不同的乐句、诗节和长段落中保持音乐的流畅性和一致性。

Lyria模型针对这些挑战进行了尝试,最大的特点是能够生成包含乐器和人声的高品质音乐。此外,Lyria模型还擅长进行音乐变换和延续的任务,使其能够基于现有音乐片段生成出风格新颖或统一的后续片段。研究人员表示,Lyria模型具有细致的微调选项,可以满足专业音乐创作的需求,同时也适合业余用户使用。

目前,Lyria模型已经应用在YouTube的短视频功能"Shorts"中,并集成在YouTube的实验音乐创作工具Dream Track中。用户可以使用Dream Track生成多样化的配乐,并选择艺术家的音乐风格,如Charlie Puth、Charli XCX、Sia等,以创造全新演绎的作品。

据悉,在Dream Track中,用户只需简单输入主题,然后选择艺术家,即可生成30秒的配乐、歌词、伴奏等内容。

DeepMind表示,他们正在广泛探索AI在音乐创作领域的应用。未来,用户将能够通过哼唱让AI生成完整歌曲,将古老的MIDI音乐转换为Remix版本,或为音轨添加各种乐器伴奏。

Lyria模型生成的所有内容都会加上SynthID水印标记,这是一种辨识歌曲是否由AI生成的机制。研究人员表示,带有“声音水印”的音频即便经过噪音添加、MP3压缩,甚至调整音调速度,也能维持可检测性。Lyria模型可以通过检测歌曲中的SynthID来确认由Lyria模型生成的部分,从而更容易辨别音乐主题内容,方便生成后续音乐片段。

AMD携手合作伙伴共推AI PC发展 锐龙8040系列领航中国市场
【智快网】3月22日消息,AMD在昨日盛大举办的AI PC创新峰会上,携手众多合作伙伴、媒体及行业领袖,共同揭示了其在中国AI PC生态系统的强劲发展势头,致力于将前沿的AI计算技术带给广大消费者。AMD首席执行官Lisa Su

2024-03-22