NVLinkとは GPU1基あたり毎秒1.8TB、72基を1つの計算機のようにつなぐ
NVLinkは、エヌビディアのGPU同士を直接つなぐ専用の配線の規格です。第5世代ではGPU1基あたり毎秒1.8テラバイトで、72基を1つの組にまとめます。
- NVLinkは、GPUとGPUをCPUを通さずに直接つなぐ、エヌビディア独自の配線の規格です。
- 第5世代(Blackwell)はGPU1基あたり毎秒1.8テラバイトで、エヌビディアは汎用のPCIe Gen5の14倍としています。
- NVL72は72基のGPUを総帯域毎秒130テラバイトで結び、1つの大きなGPUのように使います。
- 2025年5月には、他社のCPUや専用チップもNVLinkにつなげる「NVLink Fusion」を発表しました。
NVLinkとは、エヌビディアが自社のGPU同士を直接つなぐために作った、高速な配線とその決まりごとです。サーバーの中やラックの中で、複数のGPUがお互いのメモリを読み書きできるようにします。
PCIeでは足りない理由
パソコンやサーバーの部品をつなぐ標準の配線はPCIeです。PCIeでGPU同士がデータをやり取りすると、途中でCPUやスイッチを通り、帯域にも限りがある配線です。大きなAIモデルは1基のGPUのメモリに収まらないため、モデルを複数のGPUに分けて置き、計算のたびに途中の結果を交換する必要があります。この交換が遅いと、GPUが待つ時間が増えてしまいます。
NVLinkは、この交換をGPU同士で直接行うための専用線です。複数のGPUの間に「NVLinkスイッチ」という専用の半導体を置き、どのGPUからどのGPUへも同じ速さで届くようにします。
世代ごとの速さ
| 世代 | GPU | GPU1基あたり | 1組のGPUの数 | 1組の総帯域 |
|---|---|---|---|---|
| 第4世代 | Hopper | 毎秒900GB | 8 | 毎秒7.2TB |
| 第5世代 | Blackwell | 毎秒1,800GB | 72 | 毎秒130TB |
| 第6世代 | Vera Rubin | 毎秒3,000GB | 72 | 毎秒216TB |
大きく変わったのは第5世代です。Hopperの世代までは、NVLinkでつながるのはサーバー1台の中の8基まででした。Blackwellでは、ラック1本に収めた72基のGPUを全部つなげるようになり、1組のGPUの数が9倍になりました。第6世代は、1基あたりの線の数を18本から36本に増やします。エヌビディアは、第6世代の帯域はPCIe Gen6の12倍だとしています。
他社にも開いたNVLink Fusion
NVLinkは長くエヌビディアの製品の中だけで使う規格でした。エヌビディアは2025年5月18日、台北のCOMPUTEXで「NVLink Fusion」を発表し、他社が作るCPUや専用のAIチップもNVLinkでつなげるようにしました。
発表では、専用チップの設計でメディアテック、マーベル、アルチップ、アステラ・ラボ、CPUで富士通とクアルコム、設計のソフトと回路の部品でシノプシスとケイデンスが参加企業として名前を挙げられました。富士通は2ナノメートルで作るArmのCPU「FUJITSU-MONAKA」をつなぐ計画です。
関連する用語
- NVLinkスイッチ:多数のGPUのNVLinkを束ねて、相互に通信させる専用チップ。
- スケールアップ:NVLinkのような専用線で、GPUの組そのものを大きくすること。
- UALink:AMD、インテルなどが進める、GPU同士をつなぐ業界の共通規格。
- InfiniBand:NVLinkの組と組の間、サーバー同士をつなぐネットワーク。
エヌビディアはVera Rubin NVL72の性能を、AIの計算で最大3.6エクサフロップスとしています。
この記事は公開資料をもとに作成しています。売買をすすめるものではありません。誤りを見つけたら訂正します(編集方針)。
関連する記事
スケールアップとスケールアウトとは NVLinkは72基、UALinkは最大1,024基、イーサネットは12万基超
AIの計算機の広げ方には、GPUの組を大きくするスケールアップと、組の数を増やすスケールアウトがあります。エヌビディアのNVLinkは72基を1組にまとめ、業界団体のUALinkは最大1,024基をつなぐ仕様を決めました。
ラック単位のシステムとは GB200 NVL72はGPU72基、HBMは合計13.4TBで水冷
ラック単位のシステムは、GPUや配線や冷却をラック1本分まとめた1つの製品です。エヌビディアのGB200 NVL72は、GPU72基とCPU36基を水で冷やす設計で、GPUのメモリは合計13.4テラバイトです。
InfiniBandとは エヌビディアが70億ドルで手に入れた、1ポート毎秒800ギガビットの網
InfiniBandは、サーバー同士を低い遅延でつなぐネットワークの規格です。エヌビディアの最新のスイッチQuantum-X800は、毎秒800ギガビットのポートを144個持ちます。
建設のリードタイムとは TSMC熊本は着工から開所まで約1年10か月、アリゾナは発表から量産まで約4年半
建設のリードタイムとは、工場やデータセンターの着工から稼働までにかかる時間です。TSMCの熊本の第1工場は2022年4月に着工し、2024年2月に開所式を開きました。