Datacenter RDMA RoCE/InfiniBand HDR/NDR 2026(データセンターアールディーエムエー)
Datacenter高速ネットワーク。InfiniBand HDR (200Gbps)・NDR (400Gbps)・XDR (800Gbps予告)・RoCE v2 RDMA over Converged Ethernet・iWARP TCP-based RDMA・NVIDIA Spectrum-X (800GbE Ethernet AI)・Quantum-2 IB Switch (NDR)・ConnectX-7/8 NIC・BlueField-3 DPU・Cornelis Networks (Omni-Path 400)・Slingshot HPE Cray・¥¥¥¥¥/Port、2026年AI Cluster XDR普及。
概要
データセンター向けの高速ネットワーク技術は、2026年に向けて「InfiniBand HDR(200 Gbps)」「NDR(400 Gbps)」「XDR(800 Gbps)」の三段階が確立。RoCE v2(RDMA over Converged Ethernet)とiWARPの併用で、低遅延かつ高スループットを実現。NVIDIA Spectrum‑X(800 GbE Ethernet AI)やBlueField‑3 DPUの統合により、AI・HPC クラスタでの帯域需要を満たす。2025年に登場したConnectX‑8 NICは、HDR/NDR/XDRを一体化し、スイッチ側はQuantum‑2(NDR)やSlingshot HPE Crayが対応。2026年にはAI クラスターでXDRが標準化され、データセンターの帯域幅が倍増する見込み。
主な特徴・仕組み
- RDMAベース:RoCE v2はUDP/IP層でオーバーヘッドを低減し、1 µs以下のレイテンシを実現。
- HDR/NDR/XDR:HDRは200 Gbps、NDRは400 Gbps、XDRは800 Gbps。各レイヤーでのビットレートは4 Gbps/チャネルで構成。
- Ethernet統合:Spectrum‑Xは800 GbE Ethernetを採用し、AI 推論で必要とされる大容量データ転送をサポート。
- DPU拡張:BlueField‑3 DPUはCPU‑offloadでネットワーク処理を高速化し、最大10 Gbpsのスループットを内蔵。
- スイッチアーキテクチャ:Quantum‑2 IB SwitchはNDRに最適化され、レイテンシを5 µs以下に抑える。
- TCP‑ベースiWARP:既存のTCP/IPインフラと互換性があり、レガシー環境での導入が容易。
- スケーラビリティ:2025年に発表されたConnectX‑8は、HDR、NDR、XDRの三種を単一NICで提供。
- AI ワークロード最適化:Spectrum‑XはTensorFlow、PyTorch で 800 Gbps のデータパスを確保。
- セキュリティ:RoCE v2はMACsecをサポートし、データセンター内の暗号化を標準化。
- 電力効率:BlueField‑3はTDP 150 W、従来のNICと比べて30 %の消費電力削減を実現。
スペック比較表
| 製品 | インタフェース | 最大帯域 | レイテンシ | TDP | 価格帯 (USD) |
|---|---|---|---|---|---|
| Mellanox ConnectX‑8 | RoCE v2/NDR/XDR | 800 Gbps | 4 µs | 150 W | 3,200 |
| NVIDIA Spectrum‑X | 800 GbE Ethernet | 800 Gbps | 6 µs | 180 W | 4,500 |
| Quantum‑2 IB Switch | NDR | 400 Gbps | 5 µs | 250 W | 12,000 |
| BlueField‑3 DPU | RDMA offload | 200 Gbps | 3 µs | 150 W | 2,800 |
| Slingshot HPE Cray | HDR | 200 Gbps | 7 µs | 200 W | 9,000 |
具体例・対応製品
- Mellanox ConnectX‑8(モデル番号: MCX-8-400):HDR、NDR、XDRを単一NICで実装。
- NVIDIA Spectrum‑X(モデル番号: NVX-800E):800 GbE Ethernet AI向け。
- Quantum‑2 IB Switch(モデル番号: Q2-400S):NDR対応でスイッチングレイテンシ 5 µs。
- BlueField‑3 DPU(モデル番号: BF-3-200):CPUオフロードで10 Gbps 以上のスループット。
- Slingshot HPE Cray(モデル番号: SH-200):HDRで 200 Gbps のスループットを提供。
自作PCでの選び方・注意点
- ネットワークカードの選択
- 低レイテンシが必須なら ConnectX‑8 の NDR / XDR モードを選択。
- 既存の Ethernet インフラと統合したい場合は Spectrum‑X を検討。
- スイッチ・ハブ
- 800 Gbps まで拡張したいなら Quantum‑2 もしくは Slingshot HPE Cray。
- 予算が限られる場合は HDR だけでも十分なスループットを確保。
- DPU の導入
- CPU 負荷を軽減したい場合は BlueField‑3 を追加。
- DPU には専用の管理ソフトウェアが必要で、設定が煩雑。
- 電源・冷却
- 150–250 W の TDP を持つデバイスが多いので、電源容量は 800 W 以上を推奨。
- 高速ネットワークは熱を発生しやすいので、液体冷却や大型ファンを併用。
- ファームウェア・ドライバ
- 2025年にリリースされた最新ファームウェアは 1.6.3 以上。
- ドライバは Linux kernel 5.15 以降で最適化されている。
関連用語との違い
- RoCE v1 vs RoCE v2
- v1 は Infiniband 以外の物理層に非対応。v2 は UDP/IP で動作し、Ethernet での導入が可能。
- iWARP
- TCP‑ベースでレガシー環境に最適。RoCE v2 は UDP‑ベースでオーバーヘッドが少ない。
- InfiniBand HDR vs NDR vs XDR
- HDR は 200 Gbps、NDR は 400 Gbps、XDR は 800 Gbps。レイヤー構成は同一で、チャネル数が増加。
- Spectrum‑X vs 通常の 400 GbE Ethernet
- Spectrum‑X は AI 専用で 800 GbE を提供し、RDMA をサポート。400 GbE は標準的なデータセンターネットワーク。
よくある質問(FAQ)
Q1. 2026年にXDRが普及すると聞きましたが、既存のHDR/NDR機器はそのまま使えますか?
A1. はい。XDRはHDR/NDRと同じ物理層を利用するため、既存のスイッチと NIC はレイヤー設定を切り替えるだけで互換性があります。
Q2. RoCE v2 と iWARP のどちらを選べばよいですか?
A2. 低レイテンシと高スループットが必要なら RoCE v2。レガシー TCP/IP 環境と統合したい場合は iWARP。
Q3. BlueField‑3 DPU を導入した場合、どの程度の CPU 負荷削減が期待できますか?
A3. DPU が 10 Gbps 以上の RDMA オフロードを実行すると、CPU のネットワーク処理負荷は 30–50 % 削減されます。
まとめ
2026年のデータセンター高速ネットワークは、HDR(200 Gbps)→NDR(400 Gbps)→XDR(800 Gbps)という三段階で進化。RoCE v2 と iWARP が並行し、NVIDIA Spectrum‑X や BlueField‑3 DPU が AI・HPC 向けに特化。2025年に登場した ConnectX‑8 NIC は HDR/NDR/XDR を一体化し、2026年の AI クラスターで XDR が標準化されることで、データセンターの帯域幅は倍増。自作PCで構築する際は、電源容量・冷却、ファームウェア互換性を重視し、適切な NIC・スイッチ・DPU を選択することで、低レイテンシかつ高スループットの環境を実現できます。