YuE

YuE はオープンな音楽生成モデルで、現行版の YuE2 は音声ではなく楽譜から作り始めます。歌詞とスタイルの指示を渡すと、まずメロディとコードの設計図を書き、それをボーカルと伴奏を伴う一曲に仕上げます。設計図が明示されているので、音を出す前に曲を読み、鳴らし、書き換えることができ、開発チームはこれをホワイトボックスな生成と呼んでいます。同じチェックポイントで、採譜した曲を別のスタイルで歌い直すゼロショットカバーや、楽譜や編曲、歌詞について対話しながら曲を直していくエージェント編集も扱えます。品質面では WildSongBench で Suno v5 や v6 に匹敵するとチームは主張し、best-of-8 の SongBench 平均 6.9632 を評価した設定の中で最高の平均値だとしています。編集デモでは The Last Train という一曲を 9 段階、14 バージョンにわたって変えていきます。コードと重みは Apache 2.0 で公開され、初代 YuE は YuE-v1 ブランチにそのまま残されています。