全球最強(qiáng)AI超算推出:擁有5400萬個(gè)核心

7月23日消息,阿布扎比科技控股集團(tuán) G42 近日宣布推出全球最快的超級計(jì)算機(jī) Condor Galaxy-1 (CG-1),該計(jì)算機(jī)擁有 5400 萬個(gè)核心,處理能力達(dá)到 4 exaFLOPS(每秒 4 百億億次),可用于訓(xùn)練最先進(jìn)的人工智能模型。該計(jì)算機(jī)位于美國加州圣克拉拉,由美國人工智能公司 Cerebras 運(yùn)營。

據(jù)悉,CG-1一共用了 72704 個(gè) AMD EPYC 處理器,總體的片上內(nèi)存容量達(dá)到了 82TB,各個(gè)系統(tǒng)間的帶寬速率高達(dá) 388Tbps。

在 16 位計(jì)算下,該系統(tǒng)可以提供 4 exaFLOPS 的計(jì)算能力,這是目前世界上最快超級計(jì)算機(jī)速度的四倍。它可以用于訓(xùn)練 6000 億參數(shù)模型,并可擴(kuò)展到支持 100 萬億參數(shù)模型。作為對比,OpenAI 公司的 GPT-4 模型是使用 1.7 萬億參數(shù)訓(xùn)練的。

Cerebras 和 G42 還計(jì)劃在 2024 年初在美國引入另外兩臺(tái)超級計(jì)算機(jī),CG-2 和 CG-3,同時(shí)將 CG-1 作為云服務(wù)提供給客戶。

CG-1 可以原生地處理 50000 個(gè)令牌,而無需任何特殊的軟件庫。在 CG-1 上編程完全不需要使用復(fù)雜的分布式編程語言,節(jié)省了在 GPU 上分配工作流的寶貴時(shí)間。

G42 和 Cerebras 相信,最快的超級計(jì)算機(jī)將有助于應(yīng)對醫(yī)療、能源和氣候變化等挑戰(zhàn)。

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2023-07-23
全球最強(qiáng)AI超算推出:擁有5400萬個(gè)核心
用于訓(xùn)練最先進(jìn)的人工智能模型。

長按掃碼 閱讀全文