Googleは第8世代TPU 8tのラック規模のネットワークアーキテクチャの詳細を発表しました

robot
概要作成中
AIMPACT メッセージ、5 月 16 日(UTC+8)、Google は第八世代 TPU(TPU 8t)のラックレベル接続と Virgo ネットワークのアーキテクチャの詳細を公開しました。
このネットワークは高基数スイッチとフラットな二層ノンブロッキングトポロジーを採用し、データセンターネットワークの帯域幅を前世代の4倍に引き上げ、単一構造で13.4万以上の TPU 8t チップを接続可能とし、47 Pb/s のノンブロッキング双方向帯域幅と1.7K ExaFlops 以上のほぼ線形拡張性能を提供します。
TPU 8t 自体は3D環状トポロジーを採用し、単一のスーパーキャビネットで9600個のチップに拡張可能で、JAX と Pathways を通じて100万以上のチップに拡張することもサポートします。
主要技術には SparseCore アクセラレータ、VPU/MXU のオーバーラップとバランススケーリング、ネイティブ FP4 サポート、そして Arm ベースの Axion CPU の統合によるホストボトルネックの排除が含まれます。
この設計は、AI モデルが密集した大規模言語モデルから大規模ハイブリッドエキスパートモデルや推論集約型アーキテクチャへと進化することを見据えています。(出典:InFoQ)
原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • 8
  • 2
  • 共有
コメント
コメントを追加
コメントを追加
BlackVelvetKey
· 37分前
SparseCore と FP4 のネイティブサポートにより、トレーニングコストはどれだけ削減できるか?
原文表示返信0
AuroraSnowyWildernessSolitary
· 1時間前
47Pb/s 非阻塞带宽确实离谱,谷歌这网络拓扑设计是奔着 AGI 去的吧
返信0
GateUser-f78f1f3e
· 3時間前
百万チップ拡張、JAX/Pathways このエコシステムの結びつきが非常に深い
原文表示返信0
CatUnderTheNeonBridge
· 3時間前
13.4万チップ単一構造、この規模にAWSは黙り込み、Azureは涙を流した
原文表示返信0
AirdropJanitor
· 3時間前
Arm Axion CPU 統合、TPU 也要走 SoC 路線了
原文表示返信0
AprDaydream
· 3時間前
MoE アーキテクチャ専用の最適化、どうやら Gemini 次世代は大きなことをやりそうだ
原文表示返信0
AirdropArchivist
· 3時間前
VPU/MXU 重複均衡、Google はついに計算ユニットのスケジューリングを理解した
原文表示返信0
QuantitativeButNotPretentious
· 3時間前
シングルスーパーキャノピー 9600 チップ、冷却はどう解決したのですか?気になります。
原文表示返信0