ComfyUI向け音楽生成モデル「YuE2-3B」リパッケージ版が公開

2026年9月18日

ComfyUI向け音楽生成モデル「YuE2-3B」リパッケージ版が公開

基本情報

項目 内容
リポジトリ Comfy-Org/YuE2
公開日 2026-09-11
ライセンス cc-by-nc-4.0
配布形式 safetensors
出典の種類 公開元の一次情報(Comfy-Orgは公式組織アカウントであり、ComfyUI向けの公式リパッケージ版として一次情報に該当する。)

収集・肉付けの時点で当サイトのコードが確定させた値です。日付はJST。

概要

Comfy-Orgは、オープンな音楽生成モデル「YuE2-3B」をComfyUIで実行できるように再パッケージしたモデルファイル群「Comfy-Org/YuE2」を公開した。歌詞とスタイルプロンプトからボーカルと伴奏付きの楽曲を生成し、編集可能なスコアでメロディやコードを制御できるテキスト・音声変換モデルである。

スペック

  • パラメータ数: 3.6B (元モデル m-a-p/YuE2-3B のスペックに基づく)
  • アーキテクチャ: AR-NAR Mixture-of-Transformers (YuE2ForCausalLM)
  • 出力の仕様: 48 kHz ステレオ音声
  • 対応言語: 中国語 (zh)、英語 (en)
  • ライセンス: cc-by-nc-4.0 (商用利用不可)

性能・品質

元モデルのモデルカードでは、WildSongBenchおよびSHS100Kにおける評価結果が公表されている。以下はWildSongBenchにおけるフル楽曲生成の評価結果である。

→ 横にスクロールできます

Model Musicality ↑ SongBench Avg ↑ MuLan ↑ AllMusicCaps ↑ Q3O ↑ PER ↓
YuE 1 4.0847 4.9165 0.2623 0.2882 3.7301 36.38%
SongBloom 3.4493 4.2350 0.2697 0.1926 3.0287 19.19%
LeVo 2 5.4590 6.3247 0.3542 0.2680 3.9458 26.12%
ACE-Step 1.5 5.1588 6.0118 0.4372 0.3869 4.5809 7.46%
HeartMuLa 5.4963 6.2483 0.3823 0.2786 3.4907 10.71%
DiffRhythm 2 4.4775 5.2428 0.3782 0.3255 4.0870 18.41%
Muse 5.1692 6.0349 0.3937 0.3466 4.4038 33.42%
MiniMax Music 3 5.3482 6.2830 0.3928 0.3609 4.4362 6.27%
YuE2 5.9075 6.7316 0.5068 0.4054 4.6819 8.44%
YuE2 (best-of-8) 6.2666 6.9632 0.5051 0.3980 4.7009 9.79%

元モデルのYuE2は、評価されたオープンおよびプロプライエタリモデルの中で最も高いSongBench平均を記録している。一方で、指標によっては他のモデルが優れる部分もあるなど、生成品質とプロンプト準拠のバランスが示されている。

得意なこと・想定用途

元モデルは、歌詞とスタイルプロンプトからの楽曲生成に加え、メロディやコードプランニング、ABC記譜法によるスコア編集、エージェントによる楽曲の編集・リビジョンに対応している。中国語と英語の歌詞に対応しており、ゼロショットでのカバー楽曲生成やテキストからの音楽制作を想定用途としている。

類似モデルとの違い

音楽生成モデル「YuE2-3B」公開、歌詞とスタイルから楽曲制作では元モデルである「YuE2-3B」の単体公開を扱ったが、今回の記事で取り上げるComfy-Org/YuE2は、それらのモデルファイルをComfyUI向けの配置構成に合わせてリパッケージしたものである。

動作環境

動作環境の目安(Local Model Watch 算出) — パラメータ数 3.6B(元モデル m-a-p/YuE2-3B の値)

手持ちのVRAM 選べる量子化 ファイルサイズ 必要メモリの目安
RTX 4070 / 3060 12GB など 12GB BF16 6.8GB 8.1GB

必要メモリは配布ファイルの実サイズに実行時のオーバーヘッド(KVキャッシュ等)を20%見込んだ概算で、文脈長・バッチサイズ・推論エンジンによって増減します。公開元の公称値ではなく、当サイトがファイルサイズから機械的に算出した値です。 他のモデルとの比較はVRAM別の早見表を参照してください。 量子化の名前の読み方は用語集にあります。

入手方法

Hugging Faceの Comfy-Org/YuE2 から入手できる。ファイルは以下のフォルダ構造に従って配置する。

📂 ComfyUI/
└── 📂 models/
    ├── 📂 audio_encoders/
    │   └── sheetsage2_bf16.safetensors
    └── 📂 checkpoints/
        └── yue2_3b_bf16.safetensors

関連記事

出典