🛠Tools🔥🔥

Meta、AI 特化型 RDMA 通信プロトコル MetaRoCE を公開──百万 GPU 規模のイーサネット効率を最適化

Meta が商用イーサネット上で百万 GPU 規模の分散学習を支える MetaRoCE 仕様と参照実装を OCP に寄贈し、パケット損失耐性とマルチパス性能を改善。
リリース: 2026-08-24 · 読了 4

記事の要約

1. 核心(What)

  • Meta は AI ワークロードに特化した新しい RDMA 通信プロトコル MetaRoCE の仕様と参照実装を Open Compute Project (OCP) に寄贈した
  • プロトコルはスイッチ側にインテリジェンスを求めず、エンドポイント(NIC)側でマルチパス制御や損失耐性を処理する設計を採用している
  • AMD Pensando プログラマブル NIC を用いた 64 ノードの GPU クラスター検証で、従来の RoCEv2 を上回るスループットと低遅延を確認した
  • 1% のパケットロス環境で約 86% のスループットを維持し、10% の極端なロス率でも破綻せず帯域を維持する耐性を実証した

2. 影響(Why)

  • ネットワーク性能がボトルネックを解消: 数千台規模の GPU 同期における低遅延化により、大規模モデル学習時のアイドル時間を短縮し、計算資源の無駄な消耗を防ぐ実利がある。
  • 国内インフラ運用者への実質的メリット: 国内のデータセンターやクラウド基盤で大規模クラスターを管理するインフラチームは、特定のベンダー製スイッチに依存しないコスト効率の高いネットワークを構築できる。

3. 根拠・詳細(How)

  • ネイティブなアウト・オブ・オーダー配送: パケットを複数のパスに分散(スプレー)して到着順序の入れ替わりを標準ケースとして扱い、再順序化バッファなしで直接メモリへ書き込むことでヘッド・オブ・ライン・ブロッキングを排除する。
  • ロスを前提としたエンドポイント混雑制御: PFC やポーズフレームを要求せず、256 ビットの選択的確認応答(SACK)ビットベクトルの欠損から即座に欠損パケットのみを正確なパスで再送する。
  • AMD Pensando NIC によるハードウェア検証: 64 ノードの AMD GPU クラスターおよび RCCL コレクティブ通信を用い、最大 4,000 の同時接続環境下でマルチプレーン構成の線形なスループット拡張を確認済み。

4. 展望・課題(Next)

  • マルチベンダー NIC 実装の拡大: OCP を通じたオープン仕様の公開により、AMD 以外の複数 NIC ベンダーによるハードウェア実装および相互接続検証が進められる予定。