東數(shù)西算不止于“算”,更需“新存儲(chǔ)”

科技云報(bào)道原創(chuàng)。

作為數(shù)字時(shí)代的一次大變革,“東數(shù)西算”已然成為了一個(gè)“家喻戶曉”的議題。

目前,我國(guó)數(shù)據(jù)量占全球18%,算力供需失衡問題亟待解決。正因如此,國(guó)家通過“東數(shù)西算”工程,布局建設(shè)“新型算力網(wǎng)絡(luò)體系”,推動(dòng)算力集約化發(fā)展。不少人將“東數(shù)西算”比肩“南水北調(diào)”、“西氣東輸”等關(guān)乎民生質(zhì)量的浩瀚工程。

然而,在“東數(shù)西算”的宏大場(chǎng)景下,仍面臨諸多現(xiàn)實(shí)挑戰(zhàn)。“東數(shù)西算”工程的部署,將推動(dòng)?xùn)|數(shù)西存(熱點(diǎn)區(qū)域數(shù)據(jù)計(jì)算、西部備份存儲(chǔ))、東數(shù)西訓(xùn)(東部算法倉(cāng)庫(kù)、西部離線大數(shù)據(jù)分析);將實(shí)時(shí)性要求不高的業(yè)務(wù)如文檔云、掌上保險(xiǎn)、開發(fā)測(cè)試等應(yīng)用部署在西部節(jié)點(diǎn),促進(jìn)數(shù)據(jù)中心集約化、集群化發(fā)展。

從存儲(chǔ)系統(tǒng)的角度看,這些細(xì)分場(chǎng)景帶來了全新的挑戰(zhàn),例如:本地/近場(chǎng)下的熱點(diǎn)數(shù)據(jù)如何高性能存???海量數(shù)據(jù)如何靈活遷移?存儲(chǔ)系統(tǒng)層操作細(xì)節(jié)如何無感化,向客戶呈現(xiàn)便捷業(yè)務(wù)應(yīng)用?數(shù)據(jù)存儲(chǔ)的安全如何保障?如何在滿足“算網(wǎng)共生、智能編排”的架構(gòu)要求基礎(chǔ)上,有效降低存儲(chǔ)成本和能耗?

算力網(wǎng)絡(luò)挑戰(zhàn)下 移動(dòng)云“新存儲(chǔ)”應(yīng)時(shí)而生

在“東數(shù)西算”場(chǎng)景下,任何一家云存儲(chǔ)供應(yīng)商在算力網(wǎng)絡(luò)中都必須面對(duì)存儲(chǔ)系統(tǒng)的挑戰(zhàn),即要解決存儲(chǔ)系統(tǒng)高性能、高擴(kuò)展、易使用的問題。

移動(dòng)云作為中國(guó)移動(dòng)落實(shí)國(guó)家“東數(shù)西算”政策的重要一環(huán),應(yīng)時(shí)而生走出了一條“新存儲(chǔ)”技術(shù)路線。

立足運(yùn)營(yíng)商云“網(wǎng)絡(luò)+安全”的特色優(yōu)勢(shì),移動(dòng)云以云網(wǎng)融合為基礎(chǔ),構(gòu)建云邊端算力協(xié)同、算網(wǎng)融合、智能編排的社會(huì)級(jí)算力服務(wù)平臺(tái),包括“基于自研架構(gòu),打造立體泛在的算力分布,統(tǒng)一異構(gòu)封裝,拉動(dòng)跨域協(xié)同,構(gòu)筑更高效、更彈性、更可信算力基礎(chǔ)設(shè)施”,構(gòu)建出算力網(wǎng)絡(luò)下的新存儲(chǔ)能力。

基于此,移動(dòng)云存儲(chǔ)系統(tǒng)能夠“扛得住、存得下、用得好”:滿足企業(yè)關(guān)鍵業(yè)務(wù)云化對(duì)存儲(chǔ)的性能要求,提供高帶寬、高IOPS、低時(shí)延保障;滿足高速增長(zhǎng)的數(shù)據(jù)存儲(chǔ)需求,提供易擴(kuò)展、高吞吐、海量文件高效索引保障;屏蔽復(fù)雜的存儲(chǔ)系統(tǒng)層次操作細(xì)節(jié),提供易部署、易操作、簡(jiǎn)潔易用的產(chǎn)品形態(tài)。

不僅如此,移動(dòng)云還從高效無損、無限擴(kuò)展算力安全等方面多措并舉,致力實(shí)現(xiàn)算力的云、邊、端全域覆蓋,豐富公、私、專多類服務(wù)形態(tài),加快跨域資源聯(lián)通、跨域應(yīng)用協(xié)同,具體而言:

(一)高效無損與無限擴(kuò)展

基于DPU卸載提高效能,拉通裸金屬、虛機(jī)、容器等計(jì)算形態(tài),支撐應(yīng)用平滑遷移,實(shí)現(xiàn)存儲(chǔ)產(chǎn)品的軟硬協(xié)同,算力卸載。通過統(tǒng)一本地存儲(chǔ)、分布式存儲(chǔ)接入框架,結(jié)合彈性無損網(wǎng)絡(luò),打造大規(guī)模高性能計(jì)算集群,達(dá)成高性能存算協(xié)同。優(yōu)化負(fù)載感知調(diào)度、系統(tǒng)內(nèi)動(dòng)態(tài)電源管理、超高密度存儲(chǔ)、內(nèi)存調(diào)度等,實(shí)現(xiàn)綠色節(jié)能和效率提升。構(gòu)建高效敏捷的云原生基礎(chǔ)設(shè)施,打造快速擴(kuò)縮容、高效交付的能力。

(二)算力安全

基于可信計(jì)算和機(jī)密計(jì)算,實(shí)現(xiàn)從底層安全芯片到虛擬機(jī)關(guān)鍵應(yīng)用的全棧安全可信,提升算力節(jié)點(diǎn)的安全防護(hù)能力。同時(shí)基于數(shù)據(jù)全鏈路完整性校驗(yàn),確保數(shù)據(jù)準(zhǔn)確與安全。

移動(dòng)云自研存儲(chǔ)引擎 全系存儲(chǔ)產(chǎn)品賦能多業(yè)務(wù)場(chǎng)景

“東數(shù)西算”工程凸顯了數(shù)據(jù)作為一種生產(chǎn)要素的價(jià)值,并將其分類治理——對(duì)于服務(wù)后臺(tái)加工、存儲(chǔ)災(zāi)備、離線分析、存儲(chǔ)備份等對(duì)網(wǎng)絡(luò)時(shí)延要求不高的“冷數(shù)據(jù)”,優(yōu)先向貴州、內(nèi)蒙古、甘肅、寧夏節(jié)點(diǎn)轉(zhuǎn)移;與此同時(shí),對(duì)網(wǎng)絡(luò)時(shí)延要求高的“熱數(shù)據(jù)”,選擇在東部城市進(jìn)行布置。

為了全面適配“東數(shù)西算”多種應(yīng)用需求,移動(dòng)云基于自研“大云天權(quán)統(tǒng)一存儲(chǔ)引擎”的超高IO性能及跨域糾刪能力,推進(jìn)分布式塊存儲(chǔ)、對(duì)象存儲(chǔ)、文件存儲(chǔ)等存儲(chǔ)全系產(chǎn)品升級(jí),深度覆蓋多種應(yīng)用場(chǎng)景。

塊存儲(chǔ)產(chǎn)品:基于天權(quán)存儲(chǔ)引擎,打造百萬IOPS、百微秒時(shí)延、4GB/s吞吐的新一代云硬盤產(chǎn)品,可有效支撐大型數(shù)據(jù)庫(kù)、實(shí)時(shí)日志分析等IO密集型以及AI訓(xùn)練、基因測(cè)序等高吞吐型業(yè)務(wù)場(chǎng)景,滿足現(xiàn)場(chǎng)及近場(chǎng)計(jì)算訴求。對(duì)象存儲(chǔ)產(chǎn)品:通過存儲(chǔ)多協(xié)議協(xié)同(Storage Mesh),實(shí)現(xiàn)“存算一體,數(shù)隨算走”,打破“存儲(chǔ)墻”,連通“數(shù)據(jù)孤島”,打造“數(shù)據(jù)隨心可取”的存儲(chǔ)服務(wù)體系。文件存儲(chǔ)產(chǎn)品:在基于對(duì)象存儲(chǔ)的跨域糾刪能力基礎(chǔ)上,自研移動(dòng)云文件存儲(chǔ)(CFN版本),基于EOS跨域糾刪(數(shù)據(jù))及跨域KV數(shù)據(jù)庫(kù)(元數(shù)據(jù))有效支撐實(shí)時(shí)流媒體文件編輯等跨地域數(shù)據(jù)共享場(chǎng)景,實(shí)現(xiàn)多點(diǎn)接入、簡(jiǎn)單配置、隨心訪問。

總體而言,在產(chǎn)品體系賦能方面,移動(dòng)云能夠實(shí)現(xiàn)數(shù)據(jù)跨域共享、就近訪問,支持?jǐn)?shù)據(jù)冷熱智能分層、按需流動(dòng),具備多級(jí)容災(zāi)能力,滿足亞毫秒級(jí)訪問時(shí)延,向客戶提供高性能、高擴(kuò)展、高并發(fā)的數(shù)據(jù)存儲(chǔ)服務(wù)。

作為底層基礎(chǔ)設(shè)施能力之一,移動(dòng)云云存儲(chǔ)產(chǎn)品的部署目前已覆蓋移動(dòng)云所有資源池。其中,“天權(quán)”存儲(chǔ)系列產(chǎn)品部署規(guī)模超3萬臺(tái)服務(wù)器,容量規(guī)模超2500 PB,服務(wù)80余萬家客戶。且大云天權(quán)統(tǒng)一存儲(chǔ)引擎技術(shù)自主可控,適配國(guó)產(chǎn)化服務(wù)器,實(shí)現(xiàn)“一云多芯”,真正做到安全又高效。

響應(yīng)“雙碳”政策 移動(dòng)云存儲(chǔ)實(shí)現(xiàn)“節(jié)能減排”

算力服務(wù)過程中,海量數(shù)據(jù)處理帶來的“能耗和碳排放”問題也備受關(guān)注。就此,移動(dòng)云響應(yīng)國(guó)家“雙碳”政策,在打造新一代算網(wǎng)存儲(chǔ)能力時(shí)已考慮相關(guān)對(duì)策。

例如,通過上文提到的“存儲(chǔ)多協(xié)議協(xié)同”實(shí)現(xiàn)“存算一體,數(shù)隨算走”,構(gòu)建“數(shù)據(jù)隨心可取”的綠色節(jié)能數(shù)據(jù)中心,以及在技術(shù)上根據(jù)對(duì)象存儲(chǔ)多規(guī)格以及多規(guī)格間的智能數(shù)據(jù)分層特性,讓冷數(shù)據(jù)逐步流動(dòng)到存儲(chǔ)成本更低、能耗開銷更低的存儲(chǔ)類型中,達(dá)到節(jié)能減排。

具體到產(chǎn)品表現(xiàn),移動(dòng)云第四代對(duì)象存儲(chǔ)實(shí)現(xiàn)跨域糾刪,使數(shù)據(jù)冗余機(jī)制可以從3副本的300%冗余降至6+6糾刪碼形式的200%冗余,投資成本降低33%。

未來,在算網(wǎng)融合優(yōu)勢(shì)加持下,移動(dòng)云將不斷創(chuàng)新存儲(chǔ)技術(shù)、優(yōu)化全線存儲(chǔ)產(chǎn)品,兼顧安全高效與綠色低碳,為“促進(jìn)東西部平衡發(fā)展、提升產(chǎn)業(yè)鏈抗風(fēng)險(xiǎn)能力、賦能行業(yè)脫碳增長(zhǎng)”貢獻(xiàn)力量。

來源:科技云報(bào)道

免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評(píng)論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個(gè)人觀點(diǎn),與極客網(wǎng)無關(guān)。文章僅供讀者參考,并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2022-06-22
東數(shù)西算不止于“算”,更需“新存儲(chǔ)”
東數(shù)西算不止于“算”,更需“新存儲(chǔ)”

長(zhǎng)按掃碼 閱讀全文