超越H100!英特爾Gaudi 3 AI芯片要干翻英偉達?
英偉達如今在 AI 芯片市場的地位無可爭議,直線上漲的數(shù)據(jù)中心收入和市值就是最好的佐證。但王權(quán)沒有永恒,英偉達并非不可撼動。
在英偉達發(fā)布最新一代 BlackWell GPU 的三周后,4 月 9 日晚,英特爾在 Vision 2024 大會上發(fā)布了一系列關(guān)于芯片的大消息。
會上,英特爾發(fā)布了面向數(shù)據(jù)中心的第六代至強處理器,也提前展示了面向下一代 AI PC 的 Lunar Lake 處理器。不過縱觀整場大會,英特爾花費最多篇幅也最重視的,可能還是最新一代的 AI 芯片:
英特爾 Gaudi 3。
Gaudi 3,圖/英特爾
超越英偉達 H100:Gaudi 3 性能更強、成本更低
Gaudi 3 最直接的升級體現(xiàn)在性能和成本方面。
相比英偉達 H100,Gaudi 3 的人工智能推理性能平均提高 50%,能效平均提高 40%。基準(zhǔn)測試中,Gaudi 3 可以在 Llama2-7B、Llama2-13B 模型中將訓(xùn)練時間縮短到英偉達 H100 的一半,同時推理吞吐量也比后者平均高出了 50%。
可以說,Gaudi 3 至少在 Llama2 等關(guān)鍵大模型中擊敗了基于英偉達 Hopper 架構(gòu)的 H100 GPU,這也是目前市售產(chǎn)品中技術(shù)最先進的 AI 芯片。
而 Gaudi 3 還有另一個極其重要的升級——比 H100 低得多的成本,按照英特爾的原話是:
(Gaudi 3 的)成本僅為英偉達 H100 的一小部分。
也怪不得 Gaudi 3 剛剛發(fā)布,英特爾就宣布 Naver(韓國互聯(lián)網(wǎng)巨頭)、博世、IBM、Ola 等一大批公司成為英特爾 Gaudi 加速器的客戶和合作伙伴。而最早在今年第二季度,英特爾就將向戴爾、惠普以及超微等 OEM 廠商率先供貨,第三季度正式上市。
Naver 代表上臺,圖/英特爾
耐人尋味的是,英特爾往年在 Vision 大會上基本不會發(fā)布新的芯片,今年卻一反常態(tài)發(fā)布了六代至強處理器和 Gaudi 3 AI 芯片兩款重磅產(chǎn)品。
考慮到英特爾 CEO 帕特·基辛格(Pat Gesinger)去年底就炮轟過英偉達的 CUDA 生態(tài)「既淺又窄」,似乎除了軟件生態(tài)上的對抗,英特爾也在加快硬件上的追趕。
不過,Gaudi 3 真的有機會挑戰(zhàn)英偉達的 GPU 霸權(quán)嗎?
要知道,相比英偉達兩年前基于 Hopper GPU 架構(gòu)的 H100,上個月基于 BlackWell GPU 架構(gòu)發(fā)布的 B100 又進行了一輪大幅的升級,包括馬斯克也不禁感慨,「目前沒有什么比英偉達 GPU 更好的 AI 芯片了!
Blackwell GPU,圖/英偉達
Gaudi 3 硬件追上英偉達了嗎?
不同于 BlackWell 采用了最新的臺積電 3nm 工藝,Gaudi 3 基于臺積電 5nm 工藝打造,同時張量核心從 24 個升級到了 32 個。
相比上一代的 Gaudi 2,Gaudi 3 在 FP8 性能、BF16 性能、網(wǎng)絡(luò)帶寬、內(nèi)存帶寬都得到了全面的提升,其中 FP8 吞吐量更是高達 1835 TFLOPS:
基本翻了一番。
圖/ 英特爾
比較奇怪的是,搭載 128GB 內(nèi)存的 Gaudi 3 沒有采用最新的 HBM3(高帶寬內(nèi)存),而是采用了稍微有點過時的 HBM2e。
除了更低的傳輸帶寬,HBM2e 的單顆容量也只有 16GB,相比之下 HBM3 的傳輸帶寬得到了大幅提升,單顆容量也能達到 24GB,甚至是 32GB。
此外,Gaudi 3 采用了英偉達 BlackWell 類似的雙芯片設(shè)計,同時封裝了兩個相同的芯片,并通過高帶寬鏈路進行連接。每個 Gaudi 3 芯片都具有 48MB 板載 SRAM,整個芯片提供 96MB SRAM,總帶寬為 12.8TB/秒。
I/O 方面,英特爾并沒有放棄以太網(wǎng)路線,在 Gaudi 3 上將以太網(wǎng)端口的速率從 100GB/s 升級到了 200GB/s,再考慮到雙芯片的設(shè)計和每個芯片 24 個以太網(wǎng)端口,每一張 Gaudi 3 的以太網(wǎng) I/O 總帶寬高達 8.4TB/s。
總的來說,英特爾在 Gaudi 3 的升級上并不激進,甚至可以說有些保守,包括成本要低得多的 5nm 工藝和 HBM2e 內(nèi)存,都說明了這一點。雖然相比上一代 Gaudi 2 已經(jīng)有了明顯的進步,在部分大模型上超越 H100,但顯然很難與英偉達最新的 B100 相抗衡。
但英特爾的決策未必錯了。
Gaudi 3,圖/英特爾
一方面,考慮到英偉達在 AI 加速計算方面的技術(shù)和生態(tài)領(lǐng)先優(yōu)勢,英特爾就算不惜一切代價進行追趕,很可能也難以追平,同時高昂的芯片成本,還會導(dǎo)致英特爾直接錯失正在快速增長的 AI 芯片市場。
另一方面,在成本優(yōu)勢明顯的前提下,英特爾只要能做到超越英偉達 H100 的表現(xiàn),自然能夠吸引足夠的客戶進行采購。
更何況就連英偉達自己也預(yù)計,「下一代產(chǎn)品(B100)將出現(xiàn)供應(yīng)緊張」。面對「想買不能買」的窘境,很多客戶自然而然也會轉(zhuǎn)向其他可替代的 AI 芯片。
這其中,就有屬于 Gaudi 3 的機會。
硬件、軟件生態(tài)齊頭并進,英特爾能否扛起大旗?
「整個行業(yè)都希望能干掉 CUDA,包括 Google、OpenAI 等公司都在想方設(shè)法讓人工智能訓(xùn)練更加開放。我們認為 CUDA 的護城河既淺又窄!够粮裾f。
在前不久雷科技的報道中,我們就解析了全球科技巨頭組建 UXL 統(tǒng)一加速基金會對抗英偉達 CUDA 的動作。
圖/ UXL
簡單來說,巨頭們基于英特爾 oneAPI 技術(shù),正在開發(fā)一套開源軟件平臺來替代英偉達 CUDA 平臺,允許人工智能開發(fā)者在任何 AI 芯片上運行他們的代碼,也包括英偉達 GPU,核心是解除芯片硬件與軟件開發(fā)平臺之間的強綁定關(guān)系,打破英偉達 GPU 在開發(fā)生態(tài)上的霸權(quán)。
正如高通人工智能和機器學(xué)習(xí)主管 Vinesh Sukumar 所言:「我們實際上是在向開發(fā)者展示如何從英偉達平臺遷移出來!
軟件的推倒、硬件的追趕,英特爾顯然明白英偉達的成功既來源于軟件,也來源于硬件,只有齊頭并進才能真正追趕上英偉達的腳步,甚至干掉 CUDA,干掉英偉達的護城河。
但英特爾能不能扛起「打倒英偉達」的大旗,奪回數(shù)據(jù)中心市場的領(lǐng)先地位?關(guān)鍵可能取決于兩點:
一是英特爾能不能在一眾英偉達挑戰(zhàn)者中脫穎而出,包括 AMD 以及一眾全球 AI 芯片公司都不會錯過英偉達 GPU「供不應(yīng)求」的機會;
二是按照英特爾的路線圖,在合并 GPU 和 AI 芯片兩條產(chǎn)品線之后,代號「Falcon Shores」的下一代 GPU,能不能展現(xiàn)出超越英偉達最新一代 GPU 的潛力。
數(shù)據(jù)中心芯片路線圖,圖/英特爾
寫在最后
過去一年多,AI 掀起了一場不言而喻的革命,但不管 AI 將如何改變我們的生活,芯片算力依然是底層的驅(qū)動力。
但英偉達生生占據(jù)了 AI 芯片市場的 80%,這顯然并不尋常,不過人們最不滿的關(guān)鍵其實還是:英偉達無法滿足所有人。在這個前提下,不管是英特爾、AMD 還是國產(chǎn) AI 芯片廠商,其實都還有機會。
換言之,英特爾 Gaudi 3 面對的還是一塊「廣闊天地」,自然「大有可為」。
來源:雷科技
原文標(biāo)題 : 超越H100!英特爾Gaudi 3 AI芯片要干翻英偉達?
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
即日-10.29立即報名>> 2024德州儀器嵌入式技術(shù)創(chuàng)新發(fā)展研討會
-
10月31日立即下載>> 【限時免費下載】TE暖通空調(diào)系統(tǒng)高效可靠的組件解決方案
-
即日-11.13立即報名>>> 【在線會議】多物理場仿真助跑新能源汽車
-
11月14日立即報名>> 2024工程師系列—工業(yè)電子技術(shù)在線會議
-
12月19日立即報名>> 【線下會議】OFweek 2024(第九屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會
-
即日-12.26火熱報名中>> OFweek2024中國智造CIO在線峰會
推薦專題
- 1 Intel宣布40年來最重大轉(zhuǎn)型:年底前裁員15000人、拋掉2/3房產(chǎn)
- 2 因美封殺TikTok,字節(jié)股價骨折!估值僅Meta1/5
- 3 宏山激光重磅發(fā)布行業(yè)解決方案,助力智能制造產(chǎn)業(yè)新飛躍
- 4 國產(chǎn)AI芯片公司破產(chǎn)!白菜價拍賣
- 5 具身智能火了,但規(guī)模落地還需時間
- 6 國產(chǎn)英偉達們,抓緊沖刺A股
- 7 三次錯失風(fēng)口!OpenAI前員工殺回AI編程賽道,老東家捧金相助
- 8 英特爾賦能智慧醫(yī)療,共創(chuàng)數(shù)字化未來
- 9 英偉達的麻煩在后頭?
- 10 將“網(wǎng)紅”變成“商品”,AI“爆改”實力拉滿
- 高級軟件工程師 廣東省/深圳市
- 自動化高級工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)(光器件) 北京市/海淀區(qū)
- 激光器高級銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市