NVIDIA 助 xAI 建全球最大 AI 超級電腦 Colossus

2024.10.29 06:14PM

NVIDIA 與 xAI 合作,使用 NVIDIA Spectrum-X 平台打造全球最大 AI 超級電腦 Colossus,搭載 10 萬個 Hopper GPU,將用於訓練 Grok 模型。

NVIDIA宣布,xAI在美國田納西州孟菲斯市使用NVIDIA Spectrum-X乙太網路平台,打造搭載10萬個NVIDIA Hopper Tensor核心GPU構成的Colossus (以漫威漫畫中的「鋼人」為稱)超級電腦叢集。

Colossus是全球最大的人工智慧超級電腦,用於訓練xAI的Grok系列大型語言模型,並且為「X」Premium用戶提供聊天機器人功能。xAI正在將Colossus的規模擴大一倍,總計將搭載20萬個NVIDIA Hopper GPU。

xAI與NVIDIA在短短122天內就建置出相關配套設施與最先進的超級電腦Colossus,此規模系統通常要用到幾個月到幾年的時間建置。而從安裝第一個機架到開始訓練人工智慧,前後僅歷時19天。

Colossus超級電腦在訓練規模極為龐大的Grok模型時,在所有三層網路結構中,系統都未因流量碰撞而出現應用程式延遲或封包遺失的情況,並且透過Spectrum-X壅塞控制功能,確保高達95%的資料輸送量。

相較之下,標準乙太網路可能會造成上千次的流量碰撞,多半只能提供60%的資料輸送量。

NVIDIA網路事業部資深副總裁Gilad Shainer表示:「AI正成爲關鍵業務,需要更高的效能、安全性、擴充能力和成本效益。設計NVIDIA Spectrum-X乙太網路平台的目的,就是要為xAI這一類創新公司能夠更快速處理、分析和執行AI工作負載,以加速開發、部署 AI 解決方案,並且更快推向市場。」

Elon Musk在X上表示:「Colossus是世界上最強大的訓練系統。xAI團隊、NVIDIA及我們的眾多合作夥伴與供應商表現非常出色。」

xAI的發言人表示:「xAI建造出世界上最大、最強大的超級電腦。NVIDIA的Hopper GPU加上Spectrum-X讓我們能夠突破大規模訓練AI模型的界限,並在乙太網路標準基礎上,建造一個擁有超級加速、並最佳化的AI工廠。」

相關消息

科技應用
EVOX《對話式 AI 白皮書》:掌握 AI 商務溝通新趨勢
癮特務
3 天前
即拍即印普普風概念印章,製造屬於自己的圖像
annti wang
15 年前
應用教學
國家鐵道博物館開館 6處古蹟、8大展覽必參觀 藍皮火車預約搭乘方法看這裡
Zero圈圈
1 天前
開箱評測
2吋大螢幕、7.9mm羽量級厚度 Garmin Venu X1智慧手錶評測心得
Tandee
1 天前
汽車未來
全新改款 BMW iX 豪華純電旗艦休旅強勢上市!「THE NEW BMW iX」現場直擊,亮點分享一次了解!
癮特務
9 天前
App
三星One UI 8以Android桌面模式取代DeX
Chevelle.fu
3 天前
《奇妙之旅》家族競技展開 熱鬪場內容介紹
皮耶哈
15 年前
快訊
伊良可樂台灣首店即將開幕!排不到可以試試這款糖漿,肥仔快樂水自己做。
Shopping guide
1 天前
文化創意
日本Sony宣布LinkBuds Fit與初音未來合作 限量500套加贈壓克力架與AR模型
Chevelle.fu
1 天前