跳到主要内容

全部菜单

YuE

先写乐谱再生成歌曲的音乐模型

AI5天前
分类
AI
语言
英语
发布于
5天前
星标
9,394
复刻
1,012

multimodal-art-projection/YuE ↗, Python, Apache-2.0, 最近提交 1天前

YuE 是一个开源音乐生成模型,当前版本 YuE2 从乐谱而不是音频起步。给它歌词和风格提示,它先写出旋律与和弦的规划,再把这份规划渲染成带人声和伴奏的完整歌曲。规划是显式的,所以出声之前就能读、能播、能改,团队把这称为白盒生成。同一个检查点还能做零样本翻唱,把一段转录好的歌曲换一种风格重新演绎,也能做智能体编辑,通过围绕乐谱、编曲或歌词的对话逐步修改一首歌。

质量方面,作者称 YuE2 在 WildSongBench 上可与 Suno v5、v6 相比,并给出 best-of-8 下 SongBench 平均 6.9632 的数字,说这是他们评估过的设置里最高的均值。编辑演示用 The Last Train 这一首歌走过 9 个步骤、14 个版本。代码和权重以 Apache 2.0 发布,最初的 YuE 保留在单独的 YuE-v1 分支上。

喜欢这个产品吗?