- 語言
- 英語
- 發布於
- 5天前
- 複刻
- 1,012
multimodal-art-projection/YuE ↗, Python, Apache-2.0, 最近提交 1天前
YuE 是一個開源音樂生成模型,目前的版本 YuE2 從樂譜而非音訊出發。給它歌詞與風格提示,它先寫出旋律和和弦的規劃,再把這份規劃算繪成帶人聲與伴奏的完整歌曲。因為規劃是明確的,出聲之前就能讀、能播、能改,團隊稱之為白盒生成。同一個檢查點也能做零樣本翻唱,把轉譜後的歌曲換一種風格重新詮釋,還能做代理式編輯,透過針對樂譜、編曲或歌詞的對話一步步修改一首歌。
品質方面,作者表示 YuE2 在 WildSongBench 上可與 Suno v5、v6 相比,並列出 best-of-8 的 SongBench 平均 6.9632,稱這是他們評估過的設定中最高的平均值。編輯示範以 The Last Train 這首歌走過 9 個步驟、14 個版本。程式碼與權重以 Apache 2.0 釋出,最初的 YuE 保留在獨立的 YuE-v1 分支。