WINVIDIARTX Spark 搭載PCの独立系インデックスEnglish

作例 · 2026年11月19日

楽譜を直して、もう一度歌わせる — YuE2 Studio と Plenio、手元の作曲スタジオ

夜の部屋の机に、小さな MIDI キーボード、ヘッドホン、開いたノート PC。宙に浮かぶ半透明の五線譜を光のペンが直していて、そこから流れ出た音の波が、光でできた歌い手の姿と、ドラム・ベース・ギターの色の帯に分かれていく。机の端にはゲームのコントローラー。文字やロゴはない

プロンプトを入れると、曲の音声ファイルがそのまま出てくる。AI 音楽といえばその形が思い浮かびますが、方知微さんが紹介した YuE2 Studio は、先に楽譜が出てきます。本人はこれを「いま機能がとても充実したローカルの AI 音楽スタジオのひとつかもしれない」と書いています 1。ただ MP3 を吐き出すだけではないところがいちばん面白い、というのが本人の言い分です 2。

流れはこうです。曲のスタイルと歌詞を書くと、モデルがコード付きの旋律を楽譜として書き、その楽譜を歌って、ボーカル入りの曲に仕上げます 3。方知微さんによれば、音符・リズム・調を直接直して、作曲の骨組みを残したまま、別の歌い方で作り直せます 4。メロディは気に入っているのに、歌い方だけ変えたい。そんなときに、また最初から言葉で説明し直さなくていいわけです。

前作の YuE2 で、机の上が作曲スタジオになる では、YuE2 を使った作例を読みました。今回はその先、YuE2 を包んだ「スタジオ」を見ていきます。

YuE2 Studio は、アプリ 1 本のスタジオ

README によれば、YuE2 Studio は YuE2 の C++/CUDA 移植である yue2.cpp の上に作られていて、Python も Node.js も要らない単体の実行ファイルです 5。方知微さんも、デスクトップのプログラム 1 つで起動でき、Python や Node.js の環境を自分で整えなくていい点を挙げています 6。

機能も盛りだくさんです。

  • 録音から旋律を楽譜に起こし、その旋律を別のスタイルで歌わせるカバー [[F587]]
  • ドラム・ベース・ボーカル・ギター・ピアノなどを、6 つのステムに分ける機能 [[F588]]
  • MCP サーバーの内蔵。Claude Code などのエージェントから、スタジオを操作できます [[F586]]

最後の点は、方知微さんも「AI にスタジオを動かしてもらえる」として挙げています 7。机で旋律を弾いているあいだ、書き出しや歌い直しの段取りはエージェントに任せる、という使い方が浮かびます。

速さについては、作者の計測が README にあります。RTX 4090 と Q8_0 のモデルの環境で、1 分の曲が 20 秒、4 分の曲が 54 秒です 8。あくまで作者の環境での数字です。

動かすのに要るのは、Windows 10/11 の x64 9 と、VRAM 6GB 以上の GPU 10 です。Linux 版もありますが、README は実験的だと書いています 11。

使う前に知っておくと安心な点もあります。YuE2 のモデルの重みは、CC BY-NC 4.0 に作者の追加の許可がついたものです 12。個人のクリエイターは出力を無償で収益化できますが、企業の商用利用は、重みの商用ライセンスを相談することになっています 13。

ゲームの音楽は、スタイル探しかハミングから

宋宋さんは、ゲームを作る人に YuE を勧めています。ゲームの音楽をどう作るか悩んでいるなら、このオープンソースのプロジェクトが役立つはずだ、という書き出しです 14。YuE はローカルで動く AI の音楽生成プロジェクトで、歌詞と曲のスタイルを入れると、歌と伴奏のある曲ができ、器楽だけの曲にも対応する、と宋宋さんは説明しています 15。

宋宋さんが描く流れが、また具体的です。ゲームなら、まず欲しいスタイルを探すか、主旋律を自分でハミングする。それから、楽譜に沿って音を作る、という流れを挙げています 16。これは宋宋さんの勧めで、本人が作った作例ではありません。それでも、ハミングした旋律を手がかりにゲームの BGM へたどり着く、という道筋は想像しやすいものです。

なお YuE2 には、ComfyUI のネイティブのノードが用意されています 17。次のスタジオは、まさにその ComfyUI の中にあります。

ComfyUI の中の作曲室、Plenio

Plenio Music Production System は、ComfyUI の上で、ひとことのアイデアから、YuE2 か MiniMax Music 3 で仕上げた曲までを作る制作一式です。Plenio の README はそう説明しています 18。版の番号が 1.0.0 になったのは 10 月 16 日です 19。以下は、いまの版の README に書かれている内容です。

  • クラウドのサービスもアカウントも API キーも要らず、すべて手元の ComfyUI の中で動きます [[F591]]
  • コードは Apache-2.0 です [[F590]]
  • 歌詞は、ローカルの言語モデルが書くか、自分の歌詞をそのまま歌わせるかを選べます [[F594]]
  • 歌わせる前に、楽譜エディターで音符とコードを直せます [[F595]]

最後の「歌わせる前に直せる」が、この記事の山のひとつです。出てきた旋律を聴いて、気になる音符をその場で直し、それから歌わせる。YuE2 Studio と同じ「楽譜を真ん中に置く」発想が、ComfyUI のノードの中にも届いています。

速さの目安も README にあります。作者の 16GB の RTX 5060 Ti では、1 分 44 秒のインストを、作詞から書き出しまで 2 分半で作れたそうです 20。使うには ComfyUI 0.41.0 以降が要ります 21。

プロンプトを言い直す代わりに、音符を直す

どちらのスタジオにも共通しているのは、楽譜が真ん中にあることです。気に入らないところがあったとき、プロンプトの言葉を探し直すのではなく、音符を動かす。そうして、作曲は崩さずに、歌い直させます。

となると、手を動かす道具が欲しくなります。旋律をマウスで打ち込むより、鍵盤で弾いて入れたい人には、小さな MIDI キーボードがあると便利です。

PR: 「Amazonで探す」のボタンはアフィリエイトリンクです。特定の商品ではなく検索結果を開きます。

歌い直した版の、息継ぎや音のにじみを聴き分けるときには、スタジオ用のヘッドホンが頼りになります。

RTX Spark の机で回すなら

ここまでの作例で、作者が速さを測ったのは RTX 4090 8 と RTX 5060 Ti 20 です。作例の機材の話として読んでください。README の要件に挙がっている Windows は x64 版で 9、Linux 版は実験的です 11。

RTX Spark 搭載機で曲づくりを考えるなら、動かしたいツールの対応環境を、先に公式で確かめてください。

次に読む

出典

  1. @superfang119 のポスト这可能是目前功能非常完整的本地 AI 音乐工作室之一!
  2. @superfang119 のポスト最有意思的是,它不是简单地输入提示词,然后吐出一段 MP3。
  3. YuE2 Studio: https://raw.githubusercontent.com/timoncool/YuE2-Studio/main/README.mdDescribe a style, write the lyrics, and the model composes a melody with chords as sheet music, then performs it as a full song with vocals.
  4. @superfang119 のポスト可以直接编辑音符、节奏、调性,保留原来的作曲结构,重新生成不同演唱版本。
  5. YuE2 Studio: https://raw.githubusercontent.com/timoncool/YuE2-Studio/main/README.mdIt is built on [yue2.cpp](https://github.com/ServeurpersoCom/yue2.cpp), the native C++/CUDA port of YuE2.
  6. @superfang119 のポストWindows 本地运行,一个桌面程序即可启动,不需要自己配置 Python 或 Node.js 运行环境。
  7. @superfang119 のポスト内置 MCP Server,可以连接 Claude Code、Codex 等 Agent,让 AI 帮你控制音乐工作室。
  8. YuE2 Studio: https://raw.githubusercontent.com/timoncool/YuE2-Studio/main/README.mdOn our machine (RTX 4090, Ryzen 9 9950X3D, Windows 11, the Q8_0 set): a 1-minute song in 20 s, a 4-minute song in 54 s
  9. YuE2 Studio: https://raw.githubusercontent.com/timoncool/YuE2-Studio/main/README.md- Windows 10/11 x64.
  10. YuE2 Studio: https://raw.githubusercontent.com/timoncool/YuE2-Studio/main/README.md- A GPU with **6 GB of VRAM** or more:
  11. YuE2 Studio: https://raw.githubusercontent.com/timoncool/YuE2-Studio/main/README.mdThe .deb and the AppImage for Linux x86-64 are **experimental**.
  12. YuE2: https://raw.githubusercontent.com/multimodal-art-projection/YuE/main/README.md**Code, agent skill, and documentation:** [Apache 2.0](LICENSE). **Model weights:** [CC BY-NC 4.0 with additional creator permission](MODEL_LICENSE).
  13. YuE2: https://raw.githubusercontent.com/multimodal-art-projection/YuE/main/README.md| **Commercial use by companies** | [Contact us](#contact) to discuss a commercial license for the model weights. |
  14. @songsong のポスト如果你做游戏的时候想怎么给自己游戏来制作音乐 那么这个开源项目应该可以帮到你
  15. @songsong のポストYuE 是一个可以在本地运行的 AI 音乐生成项目。 输入歌词和曲风,它能生成带人声、伴奏的完整歌曲,也支持纯器乐。
  16. @songsong のポスト我们做游戏可以先找一个你希望的风格或者主旋律是自己哼出来的 然后再按乐谱生成音频
  17. YuE2: https://raw.githubusercontent.com/multimodal-art-projection/YuE/main/README.mdYuE2 has native nodes and an [official text-to-music workflow →]
  18. Plenio Music Production System: https://raw.githubusercontent.com/jplenio/Plenio-Music-Production-System/main/README.mdA song production suite for ComfyUI: from one sentence to a mastered song with YuE2 and MiniMax Music 3,
  19. Plenio Music Production System: Release Plenio Music Production System · jplenio/Plenio-Music-Production-System · GitHub1.0.0 - 2026-10-16
  20. Plenio Music Production System: https://raw.githubusercontent.com/jplenio/Plenio-Music-Production-System/main/README.mdMeasured on a 16 GB RTX 5060 Ti: a 1:44 instrumental - writer, plan, take, master and export, models loaded fresh - in 2½ minutes.
  21. Plenio Music Production System: https://raw.githubusercontent.com/jplenio/Plenio-Music-Production-System/main/README.mdNeeds **ComfyUI <!--fact:comfyui.minimum-->0.41.0<!--/fact--> or newer**

埋め込んだポストの著作権は各投稿者にあります。投稿者の説明は本人の申告で、当サイトが同じ結果を確かめたものではありません。 PR: 「Amazonで探す」のボタンはアフィリエイトリンクです。特定の商品ではなく検索結果を開きます。