首頁>科技>發(fā)明·創(chuàng)新
迄今最快AI芯片擁有4萬億個(gè)晶體管,將用于構(gòu)建大型人工智能超級(jí)計(jì)算機(jī)
據(jù)美國趣味科學(xué)網(wǎng)站14日?qǐng)?bào)道,美國芯片初創(chuàng)企業(yè)Cerebras Systems推出了全新的5納米級(jí)“晶圓級(jí)引擎3”(WSE-3)芯片。該公司官網(wǎng)稱,這是目前世界上運(yùn)行速度最快的人工智能(AI)芯片,將此前紀(jì)錄提高了1倍。WSE-3擁有4萬億個(gè)晶體管,也使其成為迄今最大的計(jì)算機(jī)芯片,專門用于訓(xùn)練大型AI模型,未來也有望用于目前正在建設(shè)中的“禿鷹銀河3號(hào)”AI超級(jí)計(jì)算機(jī)。
迄今最快的芯片將為大型AI超級(jí)計(jì)算機(jī)提供動(dòng)力。
圖片來源:Cerebras Systems官網(wǎng)
WSE-3芯片由90萬個(gè)經(jīng)AI優(yōu)化的計(jì)算核心組成,集成在一塊8.5×8.5英寸的硅晶圓上,類似其“前身”WSE-2。該公司在13日發(fā)布的一份新聞稿中表示,WSE-3的功耗和價(jià)格與WSE-2相當(dāng),但功率是其兩倍。WSE-2包括2.6萬億個(gè)晶體管和85萬個(gè)AI核心。目前用于訓(xùn)練AI模型的最強(qiáng)大芯片之一是英偉達(dá)H200圖形處理單元(GPU),但該芯片只包含800億個(gè)晶體管,僅為WSE-3晶體管數(shù)目的1/57。
WSE-3芯片將為正在建設(shè)中的“禿鷹銀河3號(hào)”超級(jí)計(jì)算機(jī)提供動(dòng)力。該超級(jí)計(jì)算機(jī)將由64個(gè)基于WSE-3芯片的Cerebras CS-3 AI系統(tǒng)組成,每秒浮點(diǎn)運(yùn)算能力有望達(dá)到8百億億次,使其成為最強(qiáng)大的AI超級(jí)計(jì)算機(jī)之一。
當(dāng)“禿鷹銀河3號(hào)”與“禿鷹銀河1號(hào)”和“禿鷹銀河2號(hào)”系統(tǒng)“強(qiáng)強(qiáng)聯(lián)手”,整個(gè)網(wǎng)絡(luò)的浮點(diǎn)運(yùn)算能力將達(dá)到每秒1千6百億億次。相較之下,目前世界上最強(qiáng)大的超級(jí)計(jì)算機(jī)——位于美國橡樹嶺國家實(shí)驗(yàn)室的“前沿”超級(jí)計(jì)算機(jī),其運(yùn)算能力為每秒1百億億次。
該公司稱,CS-3系統(tǒng)具有卓越的易用性,相比GPU需要更少代碼來訓(xùn)練大型AI模型,將用于訓(xùn)練比GPT-4或谷歌的“雙子座”大10倍的未來AI系統(tǒng)。據(jù)稱,GPT-4使用了約1.76萬億個(gè)參數(shù)來訓(xùn)練系統(tǒng),而CS-3系統(tǒng)可處理有24萬億個(gè)參數(shù)的AI模型。
編輯:馬嘉悅