YuE

YuE는 공개 음악 생성 모델이며, 현재 버전인 YuE2는 소리가 아니라 악보에서 출발합니다. 가사와 스타일 프롬프트를 주면 먼저 멜로디와 코드 계획을 쓰고, 그 계획을 보컬과 반주가 있는 완성곡으로 렌더링합니다. 계획이 명시적으로 남아 소리를 만들기 전에 곡을 읽고 들어 보고 고칠 수 있는데, 개발진은 이를 화이트박스 생성이라 부릅니다. 같은 체크포인트로 채보한 곡을 다른 스타일로 다시 부르는 제로샷 커버와 악보나 편곡, 가사를 두고 대화하며 곡을 고쳐 나가는 에이전트 편집까지 처리합니다.

개발진은 품질이 WildSongBench에서 Suno v5, v6와 견줄 만하다고 주장하며, best-of-8 기준 SongBench 평균 6.9632가 평가한 설정 중 가장 높은 값이었다고 적어 두었습니다. 편집 데모에서는 The Last Train 한 곡을 아홉 단계, 열네 버전에 걸쳐 바꿔 갑니다. 코드와 가중치는 Apache 2.0으로 공개됐고, 원조 YuE는 YuE-v1 브랜치에 그대로 남아 있습니다.