kirintropのブログ

はるか遠いミニマリストへの道です。

DGX Sparkのインターコネクトに高価なQSFP112ではなくQSFP56 DACケーブルを選ぶ話。

NVIDIAの小型デスクトップAIスーパーコンピュータ「DGX Spark」の導入にあたり、複数台をクラスタ化するためのノード間インターコネクトケーブルの手配を進めた。

公式カタログや国内代理店の案内では、400G対応の最新規格である「QSFP112」パッシブDACケーブル(ELSA TS000111等)がクラスタリング用アクセサリーとして指定されている。しかし、国内の一般流通市場では在庫切れや極端な品薄が続いており、入手性が著しく悪い。

仕様書と物理層(PHY)の仕様を詳細に確認した結果、DGX Spark本体の通信上限は200Gb/sであり、前世代の「200G QSFP56」DACケーブルで帯域の損失なく完全に代替できることが確認できた。規格の混同による誤購入のリスクと、実用的なケーブル選定の記録。

1. 「QSFP112」の入手難と検索時の落とし穴

DGX Sparkを2台または3台直結(三角形のリングトポロジ)でクラスタ化する場合、背面にある2基のConnectX-7ポート同士をダイレクトアタッチ銅線(DAC)で直結する。

しかし、指定されている「QSFP112」規格で検索を行うと、一般のECサイトでは以下のような罠に直面する。

規格名 物理嵌合 結果と注意点
QSFP112 装着可 公式指定の400G規格。流通量が極めて少なく、国内在庫はほぼ全滅。
OSFP / OSFP-RHS 不可 DGX H100等の大型サーバー用。端子サイズが大きくヒートシンク形状も異なるため物理的に挿入不能。
QSFP-DD 不可 接点が前後2列(8レーン)の別規格。QSFP112ポート側には端子が奥まで入らず物理破損のリスクがある。

Amazonや一般通販で「400G DAC」「ConnectX-7 ケーブル」と検索すると、上位にヒットするのはほぼ全てOSFP-RHSやQSFP-DDであり、これらを購入すると物理的にポートに挿さらない事態に陥る。

2. QSFPファミリの物理寸法と電気的互換性

「QSFP112」という新しい型番名から別形状のコネクタと誤解されがちだが、外形寸法およびポートケージの物理構造は従来の4レーン系QSFPと完全に同一である。

規格 総帯域 レーン構成 外形寸法・ピン配列
QSFP28 100Gb/s 25G NRZ × 4 完全同一(SFF-8665準拠)
QSFP56 200Gb/s 50G PAM4 × 4 完全同一(SFF-8665準拠)
QSFP112 400Gb/s 112G PAM4 × 4 完全同一(SFF-8665準拠)

USB-A端子がUSB 2.0から3.0へ形状を変えずに高速化したのと同様に、QSFP112は内部の信号伝送レートを引き上げた規格であり、「QSFP112ポートにQSFP56ケーブルを挿入する」ことは物理的にも規格上も何ら問題がない。

3. DGX Sparkの帯域上限とケーブル選定の考え方

DGX Sparkに搭載されているConnectX-7インターフェースは、背面のクラスタポートにおいて最大200Gb/sで動作する設計となっている。

仕様上は200G上限であるのに対し、なぜ公式アクセサリーとして400G対応のQSFP112ケーブル(TS000111等)が案内されているのかについては、いくつか技術的・運用的な背景が考えられる。

  • コネクタケージ規格との整合性: 本体の物理ポートがConnectX-7の世代に合わせてQSFP112ケージを採用しているため、公式アクセサリーの型番としてもポート規格の表記に合わせたケーブルを用意している可能性。
  • シグナルマージンの確保: より高周波・低損失を前提とする400G基準のケーブルを指定することで、200G伝送における信号品質や接続信頼性のマージンを広く取る設計思想。
  • エコシステム側の世代移行: サーバー・データセンター向けネットワーク部材全体が400G以上へシフトしており、ベンダー側の検証済み部材ラインナップが最新規格側に揃えられている影響。

公式の推奨背景にはこうした品質や整合性の考慮があると考えられるが、内部バスやリンク速度の実効仕様が200Gb/sである以上、物理的・プロトコル的に下位互換を持つQSFP56パッシブDACを接続した場合でも、通信速度のボトルネックが生じるわけではない。

4. 結論と実用的な選定

以上の検証から、品薄なQSFP112を無理に探す必要はなく、市場に潤沢に流通している200G QSFP56 パッシブDACケーブル(0.5m)を採用するのが最も合理的であるという結論に至った。

型番としては、NVIDIA/Mellanox純正およびその互換品である`MCP1650-V00AE30`(0.5m / 30AWG)が確実である。卓上3段スタック時の高低差(約14cm)を考慮しても、0.5mが余長を最小限に抑えられる最適な長さとなる。

なお、DGX Sparkには独立した10GbE RJ-45管理ポートも搭載されているため、DACケーブルの手配が本体到着に遅れる場合でも、初日のOSセットアップや初期動作確認、10GbE経由での分散クラスタ構築は通常通り実施可能である。

じゃあね。

kirintropは、Amazon.co.jpを宣伝しリンクすることによって
サイトが紹介料を獲得できる手段を提供することを目的に設定された
アフィリエイトプログラムである、Amazonアソシエイト・プログラムの参加者です。