ローカル音楽生成
Magenta RealTime 2でMacをリアルタイムAI楽器にする
完成曲を待つのではなく、演奏入力に反応するAI楽器をMacで動かします。
Magenta RealTime 2は、プロンプトを入力して完成音源を待つタイプとは異なるライブ演奏モデルです。MIDIノート、テキスト、音声のスタイル入力に反応して音を続けます。230MのSmallはApple Silicon MacBook全般でリアルタイム対応、2.4BのBaseは公式リポジトリの表にM2 Max、M3 Max、M4 Pro、M5 Maxなどが明記されています。付属のJamアプリまたはAUプラグインで演奏の流れを試します。
完成曲ではなく、演奏中のフレーズに反応するモデルです
コード進行を練習しながら、それに合うアンサンブルを聴きたい場面を想像してください。一般的なテキスト音楽生成は「穏やかな弦楽器の背景音を30秒」のように指示し、ファイルができるまで待ちます。Magenta RealTime 2（MRT2）は鍵盤の音やMIDI信号に応じてリアルタイムに音楽を続けます。完成曲を一度に書き出すツールというより、演奏しながら音を変えていく楽器に近いものです。
この違いで見るべき指標も変わります。オフライン生成では曲の長さとファイル完成時間が重要ですが、ライブ演奏ではキーを押して音が追従するか、再生が途切れないか、入力変更に音楽が反応するかを確認します。
MRT2は2026年6月4日に公開されました。モデルの重みだけでなく、Pythonライブラリ、MLX1ベースのC++推論エンジン、Jam・Colliderアプリ、AUプラグインも提供されています。ここではコードをビルドせず、付属アプリで短いコード進行を試してからDAWのMIDIトラックにプラグインを接続します。
自分のMacでリアルタイム動作するのはSmallとBaseのどちらですか
2モデルではサイズとリアルタイム対応機種が異なります。Smallは230Mパラメータで、Airを含むApple Silicon MacBook全般がリアルタイム対応として案内されています。Baseは2.4Bです。公式リポジトリのBaseリアルタイム対応欄にはM2 Max、M3 Max、M4 Pro、M5 Maxが列挙されています。記載のない機種は世代やPro・Maxの名称から推測せず、最新の機種別表とリリース情報を確認してください。公開ページには「M3 Pro以上またはM2 Max以上」という広い表現もありますが、ここではより具体的なリポジトリ表に従います。
「対応外」はBaseをまったく実行できないという意味とは限りません。READMEでは、Apple SiliconまたはNVIDIA GPU2上でPythonライブラリを使うオフライン推論が両モデルに案内されています。演奏に同期したストリーミングではなく、時間をかけてファイルを生成する経路です。鍵盤演奏に合わせるならリアルタイム対応機種かが重要で、オフライン生成でよければ別経路を確認します。
パラメータ数だけで決めないでください。付属する重みはBaseが約2.5GB、Smallが約450MBで、初回起動時にダウンロードされます。保存容量や初回の待ち時間は実行時メモリとは別です。まず小さいモデルで入力方法や音色が目的に合うか試し、Base対応機種をすでに持っている場合に比較すると、不要な買い替えを避けられます。
| モデル | サイズ | 公式のリアルタイム対応 | オフライン推論 |
|---|---|---|---|
| MRT2 Small | 230M | Airを含むApple Silicon MacBook全般 | Apple SiliconまたはNVIDIAのPython経路 |
| MRT2 Base | 2.4B | 公式表の記載機種：M2 Max、M3 Max、M4 Pro、M5 Max | Apple SiliconまたはNVIDIAのPython経路 |
リアルタイム対応はモデルサイズではなく公式の対応機種表で判断します。
MRT2 Small
- サイズ
- 230M
- 公式のリアルタイム対応
- Airを含むApple Silicon MacBook全般
- オフライン推論
- Apple SiliconまたはNVIDIAのPython経路
MRT2 Base
- サイズ
- 2.4B
- 公式のリアルタイム対応
- 公式表の記載機種：M2 Max、M3 Max、M4 Pro、M5 Max
- オフライン推論
- Apple SiliconまたはNVIDIAのPython経路
バンドルを導入し、まずJamで1音を伸ばして試します
楽器として試す最短ルートは付属アプリです。Apple Silicon用macOSバンドルをダウンロードして展開し、Jamを起動します。初回起動時にモデルの重みを取得するため、すぐ反応しなくても停止したと決めず、ダウンロード完了を待ちます。アプリ案内ではSmallが約450MB、Baseが約2.5GBです。
JamはスタイルプリセットとMIDI操作を備えた独立アプリです。まず1音または短いコードを押し続け、音が続くか聴きます。次にスタイルプロンプトを一度に1つだけ変えます。入力音を変えてアンサンブルが追従するか、プロンプトを変えて音の質感が変化するかを確かめれば、基本動作と制御を切り分けられます。プリセット名や画面構成はバージョンで変わるため、インストール済みアプリの表示に従ってください。
音が出ない場合は、モデル導入、オーディオ出力、MIDI入力を分けて確認します。まずモデルのダウンロードが完了したかを見て、Macで選択中のスピーカーやヘッドホンがミュートされていないか確認します。MIDI鍵盤を使う場合は、アプリまたはシステムが機器を認識しているか調べます。複数の設定を一度に変えるより、内蔵入力や単音のMIDIで試すと原因を絞れます。
1. 공식 Magenta RealTime 2 macOS 번들을 내려받고 압축을 풉니다.
2. Jam 앱을 열어 필요한 모델 다운로드를 마칩니다.
3. 한 음 또는 짧은 코드를 누르고 소리가 계속 이어지는지 확인합니다.
4. 입력은 그대로 두고 스타일 프롬프트 하나만 바꿔 반응을 비교합니다.DAWではMIDIトラックにAUプラグインを読み込みます
単体アプリで音が出たらDAWに接続します。付属のMRT2 AUプラグインをApplicationsフォルダーに置いて起動し、登録後にDAWのAU一覧を更新します。空のMIDIトラックを作り、楽器スロットにMRT2を読み込みます。鍵盤コントローラーがあればMIDI入力につなぎ、なければDAWのピアノロールに1音を入力して試します。
オーディオのサンプルレートは48kHzに設定します。公式手順ではAUプラグインの場合はDAWプロジェクト、単体アプリの場合はmacOSのAudio MIDI Setupで機器設定を確認します。44.1kHzのプロジェクトで無音や異常な再生が起きたら、まずサンプルレートを確認してください。プロジェクトを複製してその設定だけ変更し、同じMIDIフレーズを再生すれば原因を切り分けられます。
MRT2はMIDI Steeringに加え、テキスト説明から演奏可能なMIDI楽器を作る機能や短い音声入力を参考にする機能も案内しています。利用中のプラグイン版でどのメニューにあるか確認し、まず入力を1種類ずつ試します。短い音を押して離したときの伴奏変化を聴き、その後スタイル文を変えればMIDI制御と音色指定を分けて確認できます。
演奏時の200msをどう解釈すればよいですか
公式比較ではMRT2の制御遅延は約200ms、フレーム3長は40msで、初代の約3秒・2秒フレームと対比されています。これは連続生成中の音に入力が反映される速さです。コードを変えてから音が変わるまでの間隔に関係しますが、DAWバッファ、オーディオインターフェース、スピーカーまで含む自分の総遅延ではありません。
自分の環境を調べるには、同じ短いMIDIフレーズを何度か再生し、モデルが継続して追従するか聴きます。公表値と自分の体感を分けて記録し、DAWの48kHz設定、プラグインとモデルのバージョンも残します。モデルの制御遅延が短くても、オーディオバッファが大きい、または他の処理でシステムが混雑していると演奏感は変わります。約200msを各音の固定保証として扱わないでください。
完成曲の生成時間と比べるのは適切ではありません。MRT2は入力を受けながら音声を続けて出力するため、「4秒分の音を何秒で作るか」のような単発指標では用途を捉えられません。鍵盤入力に伴奏が反応するか、数分の演奏中に途切れないか、スタイル変更が実際の音に反映されるかを記録します。
Macの買い替えが必要かを判断します
すでにApple Silicon Macを持っているなら、まずJamでSmallを試してください。MacBook Airを含むApple Silicon Mac全般でリアルタイム実行可能と案内されており、反応する伴奏を試すためにBase対応機種を買う必要はありません。音や反応が目的に十分なら、その構成で選択を終えられます。
大きいBaseをリアルタイムで使いたい場合にだけ公式の対応表を確認します。M2 Max、M3 Max、M4 Pro、M5 Maxなど、表に列挙された機種かを確かめてください。記載のない機種を世代名から推測しないでください。Baseをオフライン実行できることと、演奏に合わせてリアルタイム再生を維持できることは別の条件です。
結論はシンプルです。MIDI演奏に伴奏をつけたいなら、MRT2はMac上で試せる楽器型モデルです。対応範囲の広いSmallから始め、Baseは機種別表を確認してから検討します。DAWではAUの登録と48kHz設定を最初に確認してください。