算力頂天地,存力納乾坤:國(guó)家超級(jí)計(jì)算濟(jì)南中心的一體兩面

原標(biāo)題:算力頂天地,存力納乾坤:國(guó)家超級(jí)計(jì)算濟(jì)南中心的一體兩面

提起山東,大家第一時(shí)間想到的可能是五岳之首泰山?!对?shī)經(jīng)》有云,泰山巖巖,魯邦所瞻,形容的就是泰山令人高山仰止的巍峨。時(shí)移事易,到了2022年,以“算賦百業(yè) 力導(dǎo)未來(lái)”為主題的首屆中國(guó)算力大會(huì)在山東濟(jì)南召開,全國(guó)計(jì)算領(lǐng)域人士聚在一起,看到的則是一座頂天立地的算力高山——國(guó)家超級(jí)計(jì)算濟(jì)南中心,成為新的齊魯?shù)貥?biāo)。

濟(jì)南市作為“中國(guó)算谷”,國(guó)家超級(jí)計(jì)算濟(jì)南中心是其算力支撐機(jī)構(gòu)之一,我國(guó)首臺(tái)完全采用自主處理器研制的千萬(wàn)億次超級(jí)計(jì)算機(jī)“神威·藍(lán)光”,就誕生于此。

以前,大部分人都很關(guān)心算力發(fā)展,而國(guó)家超級(jí)計(jì)算濟(jì)南中心的實(shí)踐說(shuō)明,數(shù)據(jù)存力更是算力價(jià)值的前提和基礎(chǔ),發(fā)揮算力價(jià)值之前,首先要構(gòu)建“數(shù)據(jù)存力”。國(guó)家超級(jí)計(jì)算濟(jì)南中心不僅是算力巔峰,還是存力標(biāo)桿,比如目前已經(jīng)在山河超級(jí)計(jì)算集群中落地了分布式存儲(chǔ)創(chuàng)新架構(gòu)。

20世紀(jì)50年代,馮諾伊曼在《101頁(yè)報(bào)告》中提出了計(jì)算機(jī)的核心:存儲(chǔ)、計(jì)算、控制,奠定了現(xiàn)代計(jì)算機(jī)的體系結(jié)構(gòu)。從此,算力和存力作為兩大高相關(guān)資源,其協(xié)同發(fā)展成為計(jì)算產(chǎn)業(yè)繞不開的主題。以新加坡、日本、加拿大等國(guó)為例,每1GB存儲(chǔ)空間對(duì)應(yīng)的算力可達(dá)1GFlops,存力和算力相對(duì)均衡。國(guó)家超級(jí)計(jì)算濟(jì)南中心的山河超級(jí)計(jì)算集群,能夠提供超850PFlops的算力,總的存儲(chǔ)資源池目前也達(dá)到了245PB規(guī)模。

如果說(shuō)算力支撐著千行百業(yè)計(jì)算需求,那么存力就是容納吞吐著澎湃算力的乾坤。國(guó)家超級(jí)計(jì)算濟(jì)南中心,給了我們一個(gè)契機(jī),在東數(shù)西算工程正式啟動(dòng)的元年,去探尋存算協(xié)同發(fā)展的答案:數(shù)字經(jīng)濟(jì)所需要的算力應(yīng)該由怎樣的存力來(lái)承載?而算力與存力的協(xié)同發(fā)展,究竟能給國(guó)家重大科研和經(jīng)濟(jì)發(fā)展帶來(lái)哪些不可替代的貢獻(xiàn)?

道法自然:頂天立地的超算中心

了解國(guó)家超級(jí)計(jì)算濟(jì)南中心需要怎樣的存力,首先需要知道它承載了怎樣的計(jì)算。

《史記集解》記載,泰山“天高不可及,冀近神靈也”,國(guó)家超級(jí)計(jì)算濟(jì)南中心所承擔(dān)的計(jì)算任務(wù),也有著類似的高水平,主要是解決其他計(jì)算機(jī)解決不了的挑戰(zhàn)性問(wèn)題,有著“頂天立地”的作用。

國(guó)家科研領(lǐng)域,超算中心服務(wù)于國(guó)家重大科研需求,主要應(yīng)用于生物計(jì)算、氣候模擬、類腦研究、災(zāi)害預(yù)報(bào)、新藥研發(fā)、基因研究、航空航天、自動(dòng)駕駛等領(lǐng)域,這些研究的特征之一就是數(shù)據(jù)密集,對(duì)于算力的需求十分龐大。以國(guó)家超級(jí)計(jì)算濟(jì)南中心的山河超級(jí)計(jì)算平臺(tái)為例:該平臺(tái)服務(wù)于山東省大科學(xué)計(jì)劃與大科學(xué)工程,為新一代信息技術(shù)、現(xiàn)代海洋、新能源新材料、高端裝備、醫(yī)養(yǎng)健康等產(chǎn)業(yè)提供算力支撐,要求性能高、算得快。

國(guó)計(jì)民生領(lǐng)域,超算中心的算力應(yīng)用涉及國(guó)計(jì)民生、科技創(chuàng)新,是支撐產(chǎn)業(yè)轉(zhuǎn)型升級(jí)的戰(zhàn)略性基礎(chǔ)設(shè)施,因此,在滿足國(guó)家科研任務(wù)對(duì)性能的巔峰要求之外,超算中心還要兼顧成本普惠、綠色低功耗等需求,支撐數(shù)字經(jīng)濟(jì)浪潮中層出不窮的應(yīng)用創(chuàng)新與計(jì)算需求。國(guó)家超級(jí)計(jì)算濟(jì)南中心就有多個(gè)計(jì)算平臺(tái),承載著關(guān)乎國(guó)計(jì)民生的眾多應(yīng)用,對(duì)區(qū)域科研水平提高和數(shù)字經(jīng)濟(jì)發(fā)展,發(fā)揮著重要價(jià)值。

從 “頂天立地”的趨勢(shì)中不難看出,超算中心已經(jīng)成為衡量國(guó)家綜合實(shí)力的標(biāo)準(zhǔn)之一,也是各國(guó)科技戰(zhàn)略的必爭(zhēng)之地。以對(duì)自然環(huán)境和生態(tài)的模擬、基礎(chǔ)物理和生命科學(xué)等問(wèn)題求解為己任的國(guó)家超級(jí)計(jì)算中心,自然也需要與之相匹配的存儲(chǔ)能力,包括:底層技術(shù)的自主創(chuàng)新、靈活擴(kuò)展的存儲(chǔ)容量、高效吞吐的存儲(chǔ)效率等。

國(guó)家超級(jí)計(jì)算中心作為存力的最佳試驗(yàn)場(chǎng),濟(jì)南已經(jīng)率先邁出了探索的步伐。

吐納天地:存力中見數(shù)字乾坤

算力作為生產(chǎn)力,支撐社會(huì)經(jīng)濟(jì)的數(shù)字化轉(zhuǎn)型升級(jí),而存力作為數(shù)據(jù)地基,在每一次吐故納新之中,助力數(shù)字經(jīng)濟(jì)行穩(wěn)致遠(yuǎn)。數(shù)據(jù)存力不僅以存儲(chǔ)容量為核心,還包含性能表現(xiàn)、安全可靠、綠色低碳在內(nèi)的綜合能力。數(shù)據(jù)存力成為數(shù)字經(jīng)濟(jì)背景下,全社會(huì)全產(chǎn)業(yè)發(fā)展的重要指標(biāo)。

那么,國(guó)家超級(jí)計(jì)算中心究竟需要怎樣的存力呢?國(guó)家超級(jí)計(jì)算濟(jì)南中心總工程師王繼彬在此次大會(huì)“以‘?dāng)?shù)’踐行,創(chuàng)新存儲(chǔ)架構(gòu)護(hù)航超算科技創(chuàng)新”的主題演講中指出,濟(jì)南超算率先落地應(yīng)用了創(chuàng)新的分布式存儲(chǔ)架構(gòu),已經(jīng)有一些經(jīng)過(guò)驗(yàn)證的關(guān)鍵指標(biāo):

一、安全可靠。作為國(guó)家的戰(zhàn)略性基礎(chǔ)設(shè)施,國(guó)家超級(jí)計(jì)算中心的安全可靠有兩層含義,一是底層技術(shù)的安全可靠,在新的國(guó)際形勢(shì)下,國(guó)家超級(jí)計(jì)算濟(jì)南中心承載著眾多科研任務(wù),尤其需要存儲(chǔ)領(lǐng)域的原創(chuàng)技術(shù),如材料介質(zhì)、高性能處理器等的系統(tǒng)創(chuàng)新,守護(hù)數(shù)據(jù)基石;二是日常運(yùn)行中的安全可靠,要求良好的容災(zāi)能力,在各類風(fēng)險(xiǎn),比如自然災(zāi)害、網(wǎng)絡(luò)襲擊、人為失誤等情況下,仍然保持業(yè)務(wù)不斷,數(shù)據(jù)不丟。

濟(jì)南中心所承載的國(guó)家對(duì)地觀測(cè)科學(xué)數(shù)據(jù)中心,每天需要對(duì)TB級(jí)的實(shí)時(shí)衛(wèi)星數(shù)據(jù)進(jìn)行集中存儲(chǔ)和計(jì)算,過(guò)程中不允許中斷,珍貴數(shù)據(jù)長(zhǎng)期存儲(chǔ)不能丟失。濟(jì)南超算基于分布式存儲(chǔ)構(gòu)建的數(shù)據(jù)存儲(chǔ)系統(tǒng),能夠做到7*24小時(shí)業(yè)務(wù)不中斷,跨節(jié)點(diǎn)保護(hù)數(shù)據(jù)安全,很好地支撐了這一高可靠需求。

二、性能表現(xiàn)。大科學(xué)領(lǐng)域HPC應(yīng)用對(duì)存力的容量和效率提出了更高要求,一方面,科學(xué)計(jì)算的數(shù)據(jù)規(guī)模龐大,需要的存儲(chǔ)容量也越大,1臺(tái)基因測(cè)序儀每年產(chǎn)生的數(shù)據(jù)可達(dá)8.5PB,需要超前規(guī)劃、靈活擴(kuò)容,比如濟(jì)南超算的山河超級(jí)計(jì)算平臺(tái),作為服務(wù)山東省大科學(xué)計(jì)劃與大科學(xué)工程的重大科學(xué)裝置,總存儲(chǔ)資源池就達(dá)到了245PB;另一方面,科學(xué)計(jì)算的存算數(shù)據(jù)交互頻繁,計(jì)算任務(wù)長(zhǎng),應(yīng)用負(fù)載多元化,訪存空間不規(guī)則,對(duì)存儲(chǔ)系統(tǒng)的吞吐性能要求很高。因此,濟(jì)南超算與華為合作,基于華為OceanStor Pacific分布式高性能并行存儲(chǔ),實(shí)現(xiàn)了業(yè)內(nèi)1.3倍的性能提升,在IO500 10節(jié)點(diǎn)打榜中獲得全球第一的榜單成績(jī)。數(shù)據(jù)存得下、流得動(dòng),是存力的基礎(chǔ)指標(biāo),為科學(xué)計(jì)算發(fā)揮支撐作用。

三、統(tǒng)一管理。隨著數(shù)據(jù)應(yīng)用場(chǎng)景增多、AI技術(shù)的成熟,智能計(jì)算、云平臺(tái)等新業(yè)務(wù)成為主流,因此需要多個(gè)計(jì)算平臺(tái)針對(duì)不同應(yīng)用輸出不同算力。面對(duì)異構(gòu)計(jì)算和多樣化應(yīng)用,傳統(tǒng)超算中心多個(gè)計(jì)算集群部署多套存儲(chǔ)的方式容易遭遇瓶頸,比如海量數(shù)據(jù)在不同的資源池中,會(huì)形成數(shù)據(jù)孤島,給協(xié)同分析、價(jià)值挖掘帶來(lái)阻礙。因此,濟(jì)南超算基于分布式存儲(chǔ),構(gòu)建了統(tǒng)一數(shù)據(jù)底座,率先打造出山東省超算互聯(lián)數(shù)據(jù)一張圖。通過(guò)全局統(tǒng)一的數(shù)據(jù)視圖和管理策略,實(shí)現(xiàn)不同集群之間的多協(xié)議互通,讓數(shù)據(jù)能夠跨域、跨集群、跨設(shè)備共享與流動(dòng),從而助力科學(xué)計(jì)算的數(shù)據(jù)價(jià)值挖掘與協(xié)同分析,加速科技創(chuàng)新。比如山河超級(jí)計(jì)算平臺(tái),就實(shí)現(xiàn)了文件、對(duì)象和大數(shù)據(jù)融合存儲(chǔ)以及數(shù)據(jù)的跨域流動(dòng)。

基于分布式存儲(chǔ)創(chuàng)新架構(gòu),國(guó)家超級(jí)計(jì)算濟(jì)南中心聯(lián)合合作伙伴,完成了一系列關(guān)于存力的實(shí)踐探索,展現(xiàn)出存力與科學(xué)計(jì)算、數(shù)字經(jīng)濟(jì)相結(jié)合的意義??梢钥隙ǖ氖?,超算中心的頂天立地,靠的不是算力的一枝獨(dú)秀,而是算力與存力的協(xié)同發(fā)展。

筑基未來(lái):雙輪驅(qū)動(dòng)使能數(shù)字經(jīng)濟(jì)

聽起來(lái),超算中心主要服務(wù)于高精尖科研,那么濟(jì)南超算的存力實(shí)踐,對(duì)普通人來(lái)說(shuō)有意義嗎?中國(guó)有句話叫“已識(shí)乾坤大,猶憐草木青”,存力不僅能包羅容納科學(xué)世界的壯闊,同樣也是支撐著每一個(gè)人、每一個(gè)企業(yè)、每一座城市的數(shù)字底座,隨著數(shù)字經(jīng)濟(jì)的騰飛,滋養(yǎng)我們習(xí)以為常的日常生活、一草一木。

舉個(gè)例子,大家應(yīng)該都了解“東數(shù)西算”工程的價(jià)值,全國(guó)算力一張網(wǎng)的逐漸落成,將切實(shí)帶來(lái)產(chǎn)業(yè)升級(jí)、生活提升、經(jīng)濟(jì)發(fā)展,讓東西部居民都為之受益。而濟(jì)南超算的分布式存儲(chǔ)架構(gòu)創(chuàng)新實(shí)踐,對(duì)于方興未艾的東數(shù)西算工程就有著極為重要的參考意義。

我們知道,“東數(shù)西算”工程旨在構(gòu)建一個(gè)集數(shù)據(jù)中心、云計(jì)算和大數(shù)據(jù)于一體的新型國(guó)家計(jì)算網(wǎng)絡(luò),這張算力資源網(wǎng)絡(luò)的本質(zhì)是以數(shù)載算,通過(guò)數(shù)據(jù)流通、分析和消費(fèi),讓算力轉(zhuǎn)化為GDP產(chǎn)值和社會(huì)民生的優(yōu)化。而數(shù)據(jù)能否存得下、存得好、流得動(dòng)、高能效,都取決于存力。

而東西部數(shù)據(jù)中心間的數(shù)據(jù)流動(dòng),就有一系列問(wèn)題是需要通過(guò)存力提升來(lái)解決的:

比如前面提到濟(jì)南超算不同計(jì)算集群中的數(shù)據(jù)孤島問(wèn)題,在東西部的數(shù)據(jù)流動(dòng)時(shí)也同樣存在。通過(guò)分布式存儲(chǔ),實(shí)現(xiàn)跨域數(shù)據(jù)安全高效流動(dòng)和共享,能夠提高東西部的數(shù)據(jù)利用率和協(xié)同效率,讓算力更充分地發(fā)揮GDP帶動(dòng)作用。

再比如,全國(guó)算力一張網(wǎng)形成之后,數(shù)據(jù)卻是散落在各處的,如果沒有跨地域統(tǒng)一的元數(shù)據(jù)管理,則無(wú)法支撐東西部并行分析,數(shù)據(jù)存儲(chǔ)能效比不高,算力基礎(chǔ)設(shè)施也就無(wú)法取得最大效益。這時(shí)候濟(jì)南超算所落地的統(tǒng)一元數(shù)據(jù)管理等經(jīng)驗(yàn),存力一張網(wǎng)結(jié)合算力一張網(wǎng)等技術(shù),將使得管理效率大大提升。

存力和算力,是數(shù)字經(jīng)濟(jì)高質(zhì)量發(fā)展的一體兩面,隨著超算互聯(lián)網(wǎng)和“東數(shù)西算”工程的持續(xù)推進(jìn),存力升級(jí)必將成為數(shù)字基礎(chǔ)設(shè)施的演進(jìn)方向。

國(guó)家超級(jí)計(jì)算濟(jì)南中心率先打開錦囊,進(jìn)入了數(shù)據(jù)驅(qū)動(dòng)第四范式的全新階段。不難發(fā)現(xiàn),無(wú)論高精尖的科研創(chuàng)新,還是接地氣的民生福祉,都藏在存力這個(gè)吐納天地的“乾坤袋”中。

接下來(lái),我們將看到中國(guó)科技在算力與存力的雙輪驅(qū)動(dòng)下,不斷鼎革天地。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2022-07-29
算力頂天地,存力納乾坤:國(guó)家超級(jí)計(jì)算濟(jì)南中心的一體兩面
作為國(guó)家的戰(zhàn)略性基礎(chǔ)設(shè)施,國(guó)家超級(jí)計(jì)算中心的安全可靠有兩層含義,一是底層技術(shù)的安全可靠,在新的國(guó)際形勢(shì)下,國(guó)家超級(jí)計(jì)算濟(jì)南中心承載著眾多科研任務(wù),尤其需要存儲(chǔ)領(lǐng)域的原創(chuàng)技術(shù),如材料介質(zhì)、高性能處理器等

長(zhǎng)按掃碼 閱讀全文