NVIDIA NVLink 6: AIファクトリー向け多層レジリエンスと性能の深掘り


ADVERTISEMENT

NVIDIA NVLinkは、AIファクトリー向けに特化して設計されたスケールアップネットワークファブリックであり、GPUが単一の計算ユニットとして機能することを可能にします。第6世代NVLinkであるNVLink 6は、その性能を大幅に向上させ、特に大規模AIワークロードの要求に応えます。NVIDIA Vera Rubin NVL72システムにおいて、NVLink 6はGPUあたり3.6 TB/sという驚異的な双方向帯域幅を提供し、これは従来のBlackwell世代のNVLink 5.0の2倍に相当します。72-GPUドメインの単一ラック内では、合計260 TB/sのGPU間帯域幅を実現します。これは、市販のイーサネットソリューションと比較して3倍低いレイテンシと10倍高いパケットレートを誇ります。

NVLink 6のアーキテクチャは、NVLink 6 Switchチップとスパインで構成され、任意のGPUが均一なレイテンシと帯域幅で他のどのGPUとも通信できるオールツーオールトポロジーを形成します。 各NVLink 6スイッチトレイには4つのNVLink 6スイッチチップが搭載され、合計28.8 TB/sのトレイ帯域幅と14.4 TFLOPSのFP8インネットワーク演算能力を提供します。 この設計により、数十億から数兆パラメータを持つモデルや、Mixture-of-Experts (MoE) アーキテクチャ、長コンテキスト推論、分離型サービス提供といった現代のAIワークロードにおいて、複数のアクセラレータが連携して単一の計算ユニットとして機能することが可能になります。 さらに、将来のNVLinkテクノロジーロードマップでは、最大1152基のGPUをサポートし、コパッケージドオプティクスによる接続も視野に入れています。

AIファクトリーを支える多層レジリエンスとインネットワーク演算

AIファクトリーでは、膨大な数のコンポーネントが連携して動作するため、システム全体にわたるレジリエンスが不可欠です。NVLink 6は、単なる高帯域幅・低レイテンシの通信を提供するだけでなく、本番環境のAIファクトリーの稼働時間を確保するためのラックレベルのレジリエンス機能を組み込んでいます。これにより、大規模なモデルが疎結合なクラスターではなく、あたかも単一の巨大なアクセラレータ上で実行されているかのように動作することを可能にします。

また、NVLink 6は、all-reduce、reduce、broadcastなどの集合演算を高速化するためのSHARP (Scalable Hierarchical Aggregation and Reduction Protocol) インネットワーク演算機能をサポートしています。 NVLink 6スイッチは、これらの演算をネットワーク内で直接実行することで、GPUの計算リソースを解放し、通信の必要性を低減します。Vera Rubin NVL72ラックでは、このインネットワーク演算により130 TFLOPSのFP8性能が提供され、GB300 NVL72システムではH200と比較してトークンあたりのワット数で50倍の改善を実現するとされています。 ハードウェアとソフトウェアの極めて綿密な共同設計は、サイロ化されたスタック要素では達成できないパフォーマンスの高速化をもたらし、今日のAIワークロードにおけるインフラ経済性へと直結します。 さらに、NVLink Fusionのような技術を通じて、カスタムXPUやCPUをNVLinkファブリックに直接統合できるようになり、AIインフラの柔軟性と効率性がさらに向上します。

大規模AIワークロードへの貢献と将来展望

AIワークロードの規模は拡大の一途を辿り、モデルはより複雑化し、AI計算インフラの展開はかつてない速度で求められています。NVLink 6は、このような飽くなき需要に応えるAIファクトリーの基盤として設計されています。その高いGPU間帯域幅、低レイテンシ、そして強力なインネットワーク演算能力は、テラバイト級のデータ処理や大規模な分散モデルトレーニングにおいて、スケーラビリティと効率性を飛躍的に向上させます。

NVLink 6は、単一のVera Rubin NVL72ラックで、全世界のインターネットデータ量のおよそ2倍に相当する240 TB/sのクロスセクショナル帯域幅を実現し、大規模なAIシステム内の全てのGPUが同時に通信できることを可能にします。 これは、AIトレーニングの高速化、より大規模なGPUシステムの構築、そしてNVIDIAスーパーコンピューターの未来を支える技術です。 NVLink Fusionにより、ハイパースケーラーやAIネイティブ企業は、カスタムXPUとCPUをNVIDIA AIインフラプラットフォームに導入し、開発と展開の複雑さを軽減し、パフォーマンスを向上させ、市場投入までの時間を短縮できます。 この統合されたアプローチは、データセンター全体の運用を簡素化し、データセンター容量の柔軟な再プロビジョニングを可能にし、カスタムAI XPUとGPUを統合して異種混合コンピューティングを実現します。 NVLink 6は、AI産業の革新のペースに追いつくための重要なアーキテクチャ上の意思決定であり、将来のAIコンピューティングの可能性を広げるでしょう。

開発者・エンジニア視点での考察

  1. 分散学習フレームワーク最適化の新たな可能性: NVLink 6の低レイテンシかつ高帯域幅のオールツーオール接続、およびSHARPによるインネットワーク演算は、従来のネットワークボトルネックを大幅に解消します。これにより、大規模分散学習において、特に通信負荷の高いcollective operations (e.g., all-reduce) の実装を再考し、より効率的なデータ同期戦略やモデル並列化手法の開発が可能になるでしょう。

  2. 障害回復性設計と運用効率の向上: NVLink 6が提供するラックレベルのレジリエンス機能は、AIファクトリーの運用における可用性を根本的に向上させます。開発者は、システム全体の障害回復メカニズムを設計する際に、NVLinkレベルでの堅牢性を前提とできるようになります。これにより、より複雑なフォールトトレラントなアプリケーション開発に注力できるだけでなく、システム運用におけるダウンタイムを最小限に抑えるための新たなアプローチを模索できます。

  3. カスタムAIチップとの統合によるエコシステム拡張: NVLink Fusionを介したカスタムXPUやCPUのNVLinkファブリックへの直接統合は、特定のAIワークロードに最適化された異種混合コンピューティング環境の設計を可能にします。これは、ハイパースケーラーやAIネイティブ企業にとって、独自のAIアクセラレータをNVIDIAのエコシステムに組み込み、パフォーマンスとコスト効率を最大化するための重要な機会を提供します。開発者は、この柔軟性を活用して、特定の推論またはトレーニング要件に合わせた差別化されたAIシステムを構築できるようになるでしょう。

Source / 元記事

この記事について

著者
AIBloom AI編集部
初回公開
最終更新

この記事は、公開されているニュース、論文、公式発表、RSSフィードなどをもとに、AIが要約・補足調査・考察を行って作成しています。

元記事の完全な翻訳・逐語的な要約ではなく、AIによる背景説明や開発者向けの考察を含みます。

重要な技術仕様・価格・提供状況などは、必ず元記事または公式情報をご確認ください。

About AIBloom

ADVERTISEMENT