華為存儲(chǔ)成人禮:我們的征途似星辰大海

導(dǎo)語(yǔ):今年是華為存儲(chǔ)業(yè)務(wù)第十八年,這十八年來(lái)風(fēng)雨兼程,從篳路藍(lán)縷到星辰大海,華為存儲(chǔ)見(jiàn)證了中國(guó)存儲(chǔ)產(chǎn)業(yè)從無(wú)到有、從弱到強(qiáng)的發(fā)展全過(guò)程。

本文詳細(xì)回憶了華為存儲(chǔ)十八年走過(guò)的風(fēng)雨歷程:艱難曲折的成長(zhǎng)過(guò)程、平凡可敬的奮斗者、扭轉(zhuǎn)乾坤的重要時(shí)刻、激動(dòng)人心的產(chǎn)品技術(shù)……

由于篇幅較長(zhǎng),特劃分為十個(gè)小節(jié),采用連載的形式發(fā)布,具體章節(jié)如下:

第一場(chǎng)自我證明

一道決定終生的選擇題

獨(dú)自闖蕩江湖的少年

學(xué)會(huì)敬畏數(shù)據(jù)

回歸是為了更好地出發(fā)

“有一個(gè)重要的任務(wù)交給你們”

用戶永遠(yuǎn)都是最好的老師

簡(jiǎn)而不減的秘訣

一抹丹青色,最是匠人心

未來(lái)征途似星辰大海

下面讓我們正式重溫華為存儲(chǔ)這段絲路藍(lán)縷、以啟山林的奮斗歷程。

這是一個(gè)頗為勵(lì)志的成長(zhǎng)故事。從三五個(gè)人的小團(tuán)隊(duì),到如今幾千人的團(tuán)隊(duì)規(guī)模;從一臺(tái)預(yù)研機(jī)產(chǎn)品,到如今全面布局的存儲(chǔ)產(chǎn)品線;從起步階段多年的凈投入,到如今連續(xù)八個(gè)季度全球全閃存增速第一;從過(guò)去的默默無(wú)聞,到如今Gartner魔力四象限領(lǐng)導(dǎo)者的??汀?/p>

做到這些,華為存儲(chǔ)花了十八年。

十八年風(fēng)雨歷程,華為存儲(chǔ)從蹣跚學(xué)步的孩童,摸著河岸的石頭艱難前行,到仗劍走天涯、勇闖天下的少年,一路艱辛卻也收獲滿滿。今年是華為存儲(chǔ)十八年,猶如一場(chǎng)成人禮,它既是致敬自己過(guò)去奮斗的青春,也意味著未來(lái)要肩負(fù)起更大的責(zé)任。

現(xiàn)在讓我們重溫歷史,感受存儲(chǔ)產(chǎn)業(yè)奮斗者的溫度。

第一場(chǎng)自我證明

在科技領(lǐng)域,任何業(yè)務(wù)從0到1的過(guò)程都注定是艱難無(wú)比的,華為存儲(chǔ)也不例外。

華為進(jìn)入到存儲(chǔ)領(lǐng)域純屬偶然,2001年互聯(lián)網(wǎng)科技泡沫破裂之后,幾乎波及到所有科技公司,華為亦不能幸免。

置之死地而后生,華為當(dāng)時(shí)認(rèn)為只做通信產(chǎn)品未來(lái)會(huì)面臨很大的風(fēng)險(xiǎn),需要積極尋找新的產(chǎn)業(yè)機(jī)會(huì)點(diǎn)。于是,華為商業(yè)網(wǎng)絡(luò)部悄然成立,存儲(chǔ)恰恰是其中一個(gè)新業(yè)務(wù)?!爱?dāng)時(shí)有幾十個(gè)新業(yè)務(wù),存儲(chǔ)是到現(xiàn)在依然活著的三個(gè)業(yè)務(wù)之一?!比A為存儲(chǔ)資深專家張國(guó)彬如是說(shuō)。

張國(guó)彬2002年清華畢業(yè)后進(jìn)入華為,恰好分配到存儲(chǔ)研發(fā)團(tuán)隊(duì),從此開(kāi)啟了與存儲(chǔ)近二十年的緣分,見(jiàn)證了華為存儲(chǔ)從無(wú)到有,從追趕到逐步超越的全過(guò)程。

“公司是2002年正式對(duì)存儲(chǔ)業(yè)務(wù)進(jìn)行投入的。當(dāng)時(shí),存儲(chǔ)產(chǎn)業(yè)的確是一個(gè)潛力無(wú)比巨大的朝陽(yáng)產(chǎn)業(yè)。不過(guò),公司剛開(kāi)始比較謹(jǐn)慎,當(dāng)時(shí)團(tuán)隊(duì)加起來(lái)也就十來(lái)個(gè)人”,張國(guó)彬回憶道,“華為存儲(chǔ)團(tuán)隊(duì)首先需要證明有沒(méi)有能力把存儲(chǔ)這件事情干成?!?/p>

彼時(shí)的全球存儲(chǔ)產(chǎn)業(yè)正處于高速發(fā)展的階段,北美互聯(lián)網(wǎng)四騎士之一的存儲(chǔ)公司EMC因?yàn)樵?11事件中幫助摩根斯坦利24小時(shí)恢復(fù)全部業(yè)務(wù)而名聲大噪,全球存儲(chǔ)工業(yè)也正式開(kāi)啟黃金時(shí)代。EMC在隨后短短幾年之內(nèi)完成了對(duì)Data General、Legato、Documentum、Avamar、VMware等一系列的收購(gòu),迅速完成了從高端存儲(chǔ)廠商到存儲(chǔ)巨頭的角色轉(zhuǎn)換,并開(kāi)啟了長(zhǎng)達(dá)十五年的存儲(chǔ)霸主生涯。

不過(guò),誰(shuí)能想到此時(shí)處于襁褓之中的華為存儲(chǔ),會(huì)在十余年之后的中國(guó)市場(chǎng)實(shí)現(xiàn)對(duì)EMC的超越。

沒(méi)人、沒(méi)槍,但是又必須在一年之內(nèi)把預(yù)研的產(chǎn)品研發(fā)出來(lái),這就是華為存儲(chǔ)團(tuán)隊(duì)當(dāng)時(shí)所面臨的困難局面。為此,華為存儲(chǔ)率先想到的思路是與高??蒲袡C(jī)構(gòu)合作。于是,華為存儲(chǔ)與華中理工大學(xué)(之后改名為華中科技大學(xué))謝長(zhǎng)生教授團(tuán)隊(duì)進(jìn)行合作,開(kāi)始基于標(biāo)準(zhǔn)服務(wù)器+商用FC卡+開(kāi)源RAID代碼+Cache/SCSI組件打造預(yù)研的存儲(chǔ)系統(tǒng)。

“經(jīng)過(guò)一年的努力,存儲(chǔ)原型機(jī)終于研發(fā)成功,將FC環(huán)境的I/O跑通?!睆垏?guó)彬介紹,“后來(lái)通過(guò)了管理層的驗(yàn)收,華為存儲(chǔ)在2003年也順理成章地正式啟動(dòng)研發(fā)。”

借助開(kāi)源+創(chuàng)新的力量,華為存儲(chǔ)第一次證明了自己有能力活下去。不過(guò),接下來(lái)還有更多意想不到的困難等待著華為。

一道決定終生的選擇題

在這個(gè)世界上,成功從來(lái)沒(méi)有捷徑可走,因?yàn)槭郎媳緛?lái)就沒(méi)有捷徑,科技領(lǐng)域尤甚。

正式開(kāi)啟研發(fā)的華為存儲(chǔ),馬上面臨著一道選擇題:走開(kāi)源路線還是走創(chuàng)新路線從頭開(kāi)始。

為此,華為存儲(chǔ)團(tuán)隊(duì)內(nèi)部發(fā)生了激烈的討論。采用開(kāi)源路線,意味著可以加速產(chǎn)品研發(fā)成功的速度,這對(duì)于初涉存儲(chǔ)領(lǐng)域的華為而言,不失為一條“捷徑”,但開(kāi)源也普遍存在著代碼與功能相對(duì)簡(jiǎn)單、效率較低、Bug較多等情況;而從一開(kāi)始就走創(chuàng)新路線的話,意味著需要保持持續(xù)投入,對(duì)時(shí)間和成本上是一場(chǎng)考驗(yàn)。

“從長(zhǎng)遠(yuǎn)來(lái)看,選擇開(kāi)源在未來(lái)會(huì)帶來(lái)更多風(fēng)險(xiǎn)?!睆垏?guó)彬解釋道,“經(jīng)過(guò)充分論證和權(quán)衡,團(tuán)隊(duì)最后一致決定寧愿花費(fèi)數(shù)年時(shí)間,也要為客戶、自己奠定堅(jiān)實(shí)的基礎(chǔ)?!边@個(gè)決定對(duì)華為存儲(chǔ)后來(lái)的研發(fā)體系打造、平臺(tái)級(jí)研發(fā)策略有著決定性的影響,也是華為存儲(chǔ)后續(xù)能夠?qū)崿F(xiàn)持續(xù)突破的關(guān)鍵。

不過(guò)一年下來(lái),研發(fā)團(tuán)隊(duì)發(fā)現(xiàn)這條路遠(yuǎn)沒(méi)想象中那么容易,頗有“一入存儲(chǔ)深似?!钡母杏X(jué)。

“干了一年發(fā)現(xiàn)不對(duì)勁,存儲(chǔ)對(duì)于研發(fā)投入實(shí)在太大了?!睆垏?guó)彬如是說(shuō),“當(dāng)時(shí)光企業(yè)級(jí)硬盤的價(jià)格就非常昂貴,加上人力成本也較高。”實(shí)際上,企業(yè)級(jí)存儲(chǔ)的技術(shù)門檻極高,作為企業(yè)數(shù)據(jù)的最后歸屬地,企業(yè)級(jí)存儲(chǔ)產(chǎn)品對(duì)于可靠性以及數(shù)據(jù)一致性有著極高的要求,這也直接決定了存儲(chǔ)研發(fā)需要高投入。

面臨著如此高昂的成本,華為也開(kāi)始有一些猶豫。到底還要不要堅(jiān)持投入?如果堅(jiān)持下去,還需要持續(xù)高投入多久才能做出有市場(chǎng)競(jìng)爭(zhēng)力的產(chǎn)品?做出產(chǎn)品之后,留給華為的市場(chǎng)窗口還有多大?

2004年,華為認(rèn)為咬緊牙關(guān)也要上,但是需要靈活的方法去更加快速地了解市場(chǎng)變化和用戶需求,進(jìn)而加速存儲(chǔ)產(chǎn)品的研發(fā)。為此,華為決定開(kāi)始采用跟國(guó)外領(lǐng)先存儲(chǔ)廠商合作的方式,一方面滿足了內(nèi)部業(yè)務(wù)需求,另外則可以通過(guò)成熟產(chǎn)品了解到用戶的實(shí)際需求。

之后,操作系統(tǒng)內(nèi)存管理、消息通信、各種存儲(chǔ)協(xié)議、Cache、RAID軟件、集群管理、配置運(yùn)維……團(tuán)隊(duì)們把一個(gè)個(gè)功能都給實(shí)現(xiàn)了。在完成單控制器產(chǎn)品之后,華為存儲(chǔ)研發(fā)團(tuán)隊(duì)又開(kāi)始著手實(shí)現(xiàn)雙控存儲(chǔ)系統(tǒng)的研發(fā)。

在當(dāng)時(shí),從單控制器存儲(chǔ)到雙控制器存儲(chǔ)意味著研發(fā)能力有著本質(zhì)的飛躍,對(duì)于存儲(chǔ)架構(gòu)設(shè)計(jì)、軟件研發(fā)等都有著極高的要求。單控制器存儲(chǔ)一旦控制器出現(xiàn)某個(gè)問(wèn)題,將會(huì)導(dǎo)致整個(gè)存儲(chǔ)的故障,這無(wú)疑會(huì)給用戶業(yè)務(wù)帶來(lái)致命的影響;而雙控制器則相當(dāng)于給存儲(chǔ)買了一份保險(xiǎn),一個(gè)控制器出現(xiàn)故障,另一個(gè)控制器立馬跟上,確??蛻魳I(yè)務(wù)不會(huì)出現(xiàn)中斷。

到了2005年,華為花費(fèi)三年多時(shí)間基本完成了對(duì)于雙控存儲(chǔ)系統(tǒng)的研發(fā)工作,這也意味著華為存儲(chǔ)研發(fā)實(shí)現(xiàn)了階段性的勝利。

就在此時(shí),一次良機(jī)又出現(xiàn)在華為存儲(chǔ)面前,它有膽量去接受它么?

獨(dú)自闖蕩江湖的少年

2006年,華為正式上市了F800存儲(chǔ)。此時(shí),華為開(kāi)始考慮大規(guī)模進(jìn)入到存儲(chǔ)產(chǎn)業(yè)之中。這時(shí),華為又面臨著選擇:第一是自己完全做,無(wú)論是研發(fā)、市場(chǎng)、渠道、服務(wù)都是自己來(lái);第二是選擇與合作伙伴一起。

這一次,華為選擇了后者。

2005年,存儲(chǔ)與安全巨頭賽門鐵克拋來(lái)橄欖枝,華為與賽門鐵克有了第一次接觸。經(jīng)過(guò)不斷的接觸與談判,華為與賽門鐵克在2006年正式開(kāi)始運(yùn)作合資公司--華為賽門鐵克(以下簡(jiǎn)稱:華賽):華為出人和研發(fā),賽門鐵克出資,主攻存儲(chǔ)與安全業(yè)務(wù)。

采用獨(dú)立合資公司的方式在當(dāng)時(shí)對(duì)雙方都有最大利益,華為獲得了充足的資金,可以持續(xù)加大對(duì)存儲(chǔ)研發(fā)的投入,打造出更具市場(chǎng)競(jìng)爭(zhēng)力的產(chǎn)品;賽門鐵克則規(guī)避了自己從頭開(kāi)始干的風(fēng)險(xiǎn)。

經(jīng)過(guò)近兩年的籌備,華賽公司在2008年正式對(duì)外掛牌成立,存儲(chǔ)團(tuán)隊(duì)規(guī)模達(dá)到了200人左右。華為存儲(chǔ)此時(shí)猶如一個(gè)獨(dú)自闖蕩江湖的少年,懷揣遠(yuǎn)大夢(mèng)想,卻也心存忐忑。

2008年是存儲(chǔ)產(chǎn)業(yè)標(biāo)志性的一年,存儲(chǔ)市場(chǎng)孕育著巨大變革,高端存儲(chǔ)創(chuàng)新架構(gòu)、重復(fù)數(shù)據(jù)刪除與壓縮技術(shù)、閃存技術(shù)、集群文件技術(shù)……幾乎所有存儲(chǔ)細(xì)分領(lǐng)域都涌現(xiàn)出一大批具有創(chuàng)新精神的創(chuàng)業(yè)公司,存儲(chǔ)產(chǎn)業(yè)的創(chuàng)新可謂是百花齊放。

“合資公司給了華為存儲(chǔ)獨(dú)立成長(zhǎng)的機(jī)會(huì)。”張國(guó)彬如是說(shuō)。

華賽猶如一個(gè)奔跑的少年,脫離了華為體系,運(yùn)轉(zhuǎn)效率、決策效率就像創(chuàng)業(yè)公司那樣迅速,積極參與到存儲(chǔ)的創(chuàng)新之中。2009年華賽就開(kāi)發(fā)出了第一款SSD,要知道SSD在高端存儲(chǔ)中首次采用也僅僅是在2008年。

不僅如此,華賽作為一家獨(dú)立的合資公司,開(kāi)始走出去、引進(jìn)來(lái),在全球范圍招募了大量?jī)?yōu)秀人才,從而奠定了華為存儲(chǔ)全球研發(fā)體系的基礎(chǔ)。通過(guò)不斷見(jiàn)世面和引進(jìn)存儲(chǔ)大咖,華為存儲(chǔ)整體人才體系的視野和思路得到了大幅開(kāi)拓。

“賽門鐵克并沒(méi)有為華賽注入一行代碼。華賽沒(méi)有采用賽門鐵克任何技術(shù),但是研發(fā)團(tuán)隊(duì)與賽門鐵克存儲(chǔ)專家們交流的確是受益匪淺。”張國(guó)彬澄清道。

不僅僅在研發(fā)體系、研發(fā)思路上突飛猛進(jìn),獨(dú)立運(yùn)作的華賽意味著沒(méi)有大公司的市場(chǎng)和銷售資源可用,必須自己建立專業(yè)的銷售與市場(chǎng)團(tuán)隊(duì),勇敢走出去見(jiàn)客戶、啃單子。張國(guó)彬回憶道,那幾年的獨(dú)立運(yùn)營(yíng),的確給了銷售與市場(chǎng)團(tuán)隊(duì)很大鍛煉,政府、金融、運(yùn)營(yíng)商、大企業(yè)的頭部客戶都要挨個(gè)啃下來(lái)?!?009年,華賽存儲(chǔ)產(chǎn)品就用在了國(guó)有大銀行的票據(jù)影像歸檔上,并且在各個(gè)行業(yè)都開(kāi)始取得突破?!?/p>

然而,成長(zhǎng)的道路從來(lái)沒(méi)有一帆風(fēng)順。人們常說(shuō),成長(zhǎng)其實(shí)就是一種刻骨銘心的蛻變。華賽這位奔跑的存儲(chǔ)少年,一樣也有摔得刻骨銘心的時(shí)刻。

學(xué)會(huì)敬畏數(shù)據(jù)

2009年,隨著華賽產(chǎn)品在多個(gè)行業(yè)用戶中得到使用,一些問(wèn)題也開(kāi)始接踵而至:告警器聲音與旋轉(zhuǎn)磁盤聲音形成共振,造成硬盤批量次故障;空氣污染、環(huán)境中的硫化物腐蝕硬盤,造成硬盤變慢;控制器短路;甚至傳說(shuō)中宇宙射線引起內(nèi)存Bit位翻轉(zhuǎn)導(dǎo)致數(shù)據(jù)不一致的情況也出現(xiàn)了。

這讓華賽公司開(kāi)始重新審視存儲(chǔ)。張國(guó)彬表示:“老實(shí)說(shuō),這些問(wèn)題讓華為存儲(chǔ)真正學(xué)會(huì)了尊敬存儲(chǔ)、敬畏數(shù)據(jù)?!边@個(gè)世界上從來(lái)沒(méi)有隨隨便便的成功,市場(chǎng)上的競(jìng)爭(zhēng)友商之所以能夠在市場(chǎng)中占據(jù)領(lǐng)先,跟它們多年以來(lái)摸爬滾打分不開(kāi),此時(shí)的華為存儲(chǔ)還稍顯稚嫩,面對(duì)這些問(wèn)題顯得有點(diǎn)措手不及。

從摔倒的地方重新開(kāi)始,華賽公司痛定思痛,在時(shí)任華賽存儲(chǔ)業(yè)務(wù)總裁范瑞琦的帶領(lǐng)下,研發(fā)團(tuán)隊(duì)在2009年干了一件事情,除了手頭上的研發(fā)工作之外,將底層所有存儲(chǔ)協(xié)議、硬件部件要搞得清清楚楚、明明白白。

之后,研發(fā)團(tuán)隊(duì)硬是把厚厚的英文協(xié)議書全部啃了下來(lái),然后重新進(jìn)行抗振、防腐設(shè)計(jì),并且與硬盤廠商進(jìn)行聯(lián)合設(shè)計(jì),認(rèn)真摸索每種、每塊硬盤故障參數(shù),并且進(jìn)行軟硬件聯(lián)合處理,硬盤百萬(wàn)行代碼的固件(Firmware)必須經(jīng)過(guò)長(zhǎng)時(shí)間的實(shí)驗(yàn)室驗(yàn)證才能給用戶升級(jí)。

自此,華為存儲(chǔ)確定了堅(jiān)不可動(dòng)的原則:存儲(chǔ)可靠性第一,數(shù)據(jù)絕對(duì)不能丟失,存儲(chǔ)產(chǎn)品只有做到數(shù)據(jù)不丟失才能上市。

“直到今天我依然清晰的記得,每個(gè)周末大家聚在一起做問(wèn)題根因分析的日子,針對(duì)每個(gè)出現(xiàn)的問(wèn)題大家刨根問(wèn)底,直到最終把它解決?!睆垏?guó)彬回憶道。

另外讓華賽這位存儲(chǔ)少年受益匪淺的就是與世界一流人才的交流與學(xué)習(xí)。當(dāng)時(shí)的華賽研發(fā)團(tuán)隊(duì),很多人都畢業(yè)于名校,并且已經(jīng)在存儲(chǔ)領(lǐng)域積累了好幾年的經(jīng)驗(yàn),對(duì)自己可謂是信心滿滿。但是世界一流人才的到來(lái),向華為注入的不僅僅是存儲(chǔ)領(lǐng)域各種領(lǐng)先的經(jīng)驗(yàn)、技巧和方法,更是在思想層面對(duì)于華賽存儲(chǔ)研發(fā)團(tuán)隊(duì)產(chǎn)生重要的影響。

比如,在存儲(chǔ)領(lǐng)域非常常見(jiàn)的時(shí)延控制方面,時(shí)延可謂是存儲(chǔ)領(lǐng)域一個(gè)關(guān)鍵指標(biāo),時(shí)延的波動(dòng)與異??赡軙?huì)給存儲(chǔ)系統(tǒng)的性能帶來(lái)極大影響,進(jìn)而會(huì)直接影響到業(yè)務(wù)的性能。如何對(duì)于時(shí)延進(jìn)行精準(zhǔn)的控制可謂是一門手藝活,一流存儲(chǔ)的大咖對(duì)于時(shí)延精準(zhǔn)控制的專注猶如匠心精神,讓華賽研發(fā)團(tuán)隊(duì)醍醐灌頂,明白了存儲(chǔ)技術(shù)的打磨沒(méi)有止境,需要有匠心精神對(duì)技術(shù)精益求精。

在這幾年的獨(dú)立運(yùn)營(yíng)中,華賽存儲(chǔ)摔了很多跤、吃了很多苦,也獲得了很多回報(bào),整個(gè)公司運(yùn)營(yíng)狀況良好,連續(xù)兩次實(shí)現(xiàn)盈利;人才隊(duì)伍建設(shè)卓有成效,研發(fā)體系打造初步成型;產(chǎn)品研發(fā)上節(jié)節(jié)開(kāi)花,第二代中端系統(tǒng)、SSD硬盤等新品讓業(yè)界為之一亮。

就在這時(shí),華賽卻選擇了回歸華為大家庭,這個(gè)選擇會(huì)對(duì)存儲(chǔ)已經(jīng)構(gòu)建起來(lái)的產(chǎn)品、研發(fā)、銷售體系產(chǎn)生什么樣的影響?

回歸是為了更好地出發(fā)

2011年11月4日,華為和賽門鐵克宣布,雙方已就華為以5.3億美元收購(gòu)賽門鐵克持有的華為賽門鐵克公司49%的股權(quán)達(dá)成協(xié)議。自此,華賽回歸成為定局。

如果按照5.3億美元的價(jià)格來(lái)計(jì)劃,華賽公司當(dāng)年的估值已經(jīng)突破了10億美金,可謂是名副其實(shí)的存儲(chǔ)獨(dú)角獸。華賽公司也用自己親身經(jīng)歷證明了一個(gè)事實(shí):這批華為存儲(chǔ)人是有能力在市場(chǎng)中生存乃至干出一番事業(yè)。

此刻的回歸,是會(huì)重蹈過(guò)去創(chuàng)業(yè)公司被并購(gòu)入大公司之后碌碌無(wú)為的覆轍,還是會(huì)讓整個(gè)存儲(chǔ)業(yè)務(wù)如虎添翼、再上一個(gè)新臺(tái)階?這不僅是外界的疑慮,也是存儲(chǔ)團(tuán)隊(duì)熱切期盼知道的。

“正式回歸之后,公司馬上大力投入存儲(chǔ),明顯感覺(jué)到公司希望做大、做強(qiáng)存儲(chǔ)業(yè)務(wù)?!币晃唤?jīng)歷過(guò)華為存儲(chǔ)離開(kāi)、獨(dú)立、回歸全過(guò)程的員工感嘆道,“如果依然保持獨(dú)立,出于營(yíng)收、盈利等方面的考慮,研發(fā)上不可能完全放開(kāi)手腳,尤其是在基礎(chǔ)技術(shù)領(lǐng)域的研發(fā)上?!?/p>

自此,華為存儲(chǔ)在研發(fā)體系和研發(fā)人才上正式步入了全球化、頂尖水平的建設(shè)階段,為日后的OceanStor存儲(chǔ)Dorado系列全閃存,Pacific系列海量存儲(chǔ)等重磅產(chǎn)品打下了堅(jiān)實(shí)的基礎(chǔ)。

從國(guó)內(nèi)來(lái)看,在成都、北京、深圳三地,華為存儲(chǔ)早已建立起完善和強(qiáng)大的研發(fā)中心。全球也建立了多所存儲(chǔ)領(lǐng)域的研究所。經(jīng)過(guò)幾年的打造,華為存儲(chǔ)的研發(fā)團(tuán)隊(duì)已經(jīng)媲美世界任何頂尖存儲(chǔ)公司。

研發(fā)在回歸之后另外一個(gè)最大的變化就是:平臺(tái)化。隨著全球研發(fā)體系的逐步建立與完善,華為存儲(chǔ)研發(fā)平臺(tái)化開(kāi)始踏上了日程。張國(guó)彬透露:“以前在華賽時(shí)期,公司其實(shí)非常希望研發(fā)平臺(tái)化。但是華賽畢竟在規(guī)模上還較小,平臺(tái)化需要較長(zhǎng)時(shí)間才會(huì)發(fā)揮作用?!钡?,回歸華為之后,華為存儲(chǔ)研發(fā)平臺(tái)戰(zhàn)略所需要的條件非常完善,華為存儲(chǔ)抽調(diào)了大部分研發(fā)力量來(lái)對(duì)平臺(tái)化進(jìn)行建設(shè)。

華為數(shù)據(jù)存儲(chǔ)產(chǎn)品部部長(zhǎng)項(xiàng)飛介紹:“存儲(chǔ)平臺(tái)化其實(shí)是一個(gè)漸進(jìn)的過(guò)程,需要存儲(chǔ)關(guān)鍵技術(shù)能力、軟硬件研發(fā)能力、項(xiàng)目管理能力的不斷積累,然后通過(guò)一個(gè)組件化的思路,讓復(fù)雜的存儲(chǔ)系統(tǒng)由各種組件來(lái)構(gòu)成,不同的存儲(chǔ)系統(tǒng)之間的組件構(gòu)成也會(huì)有很大變化?!?/p>

毫無(wú)疑問(wèn),平臺(tái)化戰(zhàn)略就是先讓各項(xiàng)技術(shù)、功能逐步完成組件化,并且基于解耦的思路去構(gòu)建存儲(chǔ)系統(tǒng),最大限度的去復(fù)用各種技術(shù)與組件。這種平臺(tái)化戰(zhàn)略帶來(lái)最直接的好處就是:研發(fā)效率大幅提升,組件之間互融互通、產(chǎn)品更新迭代更加快速,可以更加快速地響應(yīng)市場(chǎng)上靈活多變的需求。

華為存儲(chǔ)這種自成立第一天就基于平臺(tái)化戰(zhàn)略,與通過(guò)各種并購(gòu)而來(lái)的平臺(tái)有著天壤之別,雖然需要長(zhǎng)時(shí)間的積累,但是隨著時(shí)間推移,研發(fā)布局與分工逐步完善,核心關(guān)鍵技術(shù)的不斷積累與沉淀,省去了日后各種產(chǎn)品與功能打通、兼容甚至未來(lái)規(guī)劃的種種麻煩,其所帶來(lái)的飛輪效應(yīng)也會(huì)日漸突出。

還有一個(gè)顯著改變就是,華為整個(gè)研發(fā)大體系中的研發(fā)成果能為存儲(chǔ)所用,比如華為2012實(shí)驗(yàn)室研發(fā)成果、操作系統(tǒng)技術(shù)等等。項(xiàng)飛直言,存儲(chǔ)是一種極為復(fù)雜的產(chǎn)品,涉及到計(jì)算、網(wǎng)絡(luò)、介質(zhì)等多個(gè)領(lǐng)域,考慮到數(shù)據(jù)中心未來(lái)的發(fā)展趨勢(shì),僅僅站在存儲(chǔ)研發(fā)團(tuán)隊(duì)自身的視角是遠(yuǎn)遠(yuǎn)不夠的,需要充分利用華為內(nèi)部不同的研發(fā)團(tuán)隊(duì),進(jìn)行協(xié)作,以更加寬廣的視角和開(kāi)發(fā)合作的方式來(lái)推動(dòng)存儲(chǔ)不斷向前發(fā)展。

自此,華為存儲(chǔ)的技術(shù)創(chuàng)新+用戶需求的雙輪創(chuàng)新機(jī)制開(kāi)始真正發(fā)揮威力。日后,華為存儲(chǔ)產(chǎn)品一次次的在各種測(cè)試中刷屏霸榜,產(chǎn)品開(kāi)創(chuàng)性創(chuàng)新也猶如芝麻開(kāi)花節(jié)節(jié)高,這與其他相對(duì)“沉寂”的競(jìng)爭(zhēng)對(duì)手形成了鮮明對(duì)比。

不過(guò)建立平臺(tái)化是一個(gè)痛苦和長(zhǎng)期的過(guò)程。在這之前,華為存儲(chǔ)還遇到了更加富有挑戰(zhàn)的事情:如何讓自身產(chǎn)品線豐富和強(qiáng)大起來(lái),在高端存儲(chǔ)和分布式文件存儲(chǔ)這兩大領(lǐng)域?qū)崿F(xiàn)突破。

高端存儲(chǔ)這座山必須躍過(guò)

在存儲(chǔ)產(chǎn)業(yè)中,高端存儲(chǔ)猶如皇冠上的那顆明珠,它直接代表著一家存儲(chǔ)廠商在業(yè)界的地位。如果說(shuō)不想當(dāng)將軍的士兵不是好士兵,那么不想做高端存儲(chǔ)的廠商一定不是有遠(yuǎn)大抱負(fù)的廠商。這也是為什么華為會(huì)孜孜不倦投入到高端存儲(chǔ)的研發(fā)之中。

眾所周知,高端存儲(chǔ)所擁有的高可靠、高性能、高一致性使得其技術(shù)門檻極高,從1990年以來(lái),在高端存儲(chǔ)市場(chǎng)真正擁有絕對(duì)實(shí)力只有EMC和HDS(后來(lái)更名為Hitachi Vantara)兩家公司,要想突破市場(chǎng)競(jìng)爭(zhēng)壁壘談何容易。

“當(dāng)時(shí)做決定還是非常艱難的,大家爭(zhēng)議與討論很多?!睆垏?guó)彬如是說(shuō),“畢竟一旦決定了,投入成本會(huì)非常巨大,也不允許失敗?!笔聦?shí)上,華為存儲(chǔ)要想進(jìn)一步突破市場(chǎng),攻克高端存儲(chǔ)也是必經(jīng)之路,“沒(méi)有高端存儲(chǔ)產(chǎn)品,中低端產(chǎn)品從長(zhǎng)期來(lái)看也可能會(huì)賣不好?!?/p>

當(dāng)時(shí),云計(jì)算的趨勢(shì)剛開(kāi)始冒起,一些存儲(chǔ)廠商已經(jīng)看到了高端存儲(chǔ)的弊病,雖然能夠完美滿足傳統(tǒng)業(yè)務(wù)場(chǎng)景的需求,但擴(kuò)展性弱、投入大的弊病開(kāi)始在云計(jì)算時(shí)代中逐步放大。張國(guó)彬透露:“當(dāng)時(shí)的確有好幾家廠商看到了傳統(tǒng)高端存儲(chǔ)的弊病,大家都看到了未來(lái)的方向。”

為此,華為基于自身的技術(shù)基礎(chǔ),以及業(yè)界的趨勢(shì),開(kāi)始著手投入到高端存儲(chǔ)的研發(fā)之中。當(dāng)時(shí),張國(guó)彬帶領(lǐng)100來(lái)號(hào)人在山里封閉了幾個(gè)月,專攻華為高端存儲(chǔ)的新架構(gòu)設(shè)計(jì)。整個(gè)過(guò)程就像修煉絕世武功一樣,日復(fù)一日的用功無(wú)法感知到武功的精進(jìn)程度,當(dāng)打通任督二脈,捅破那層窗戶紙,猶如撥云見(jiàn)日、豁然開(kāi)朗。

經(jīng)過(guò)不斷的摸索和努力,華為存儲(chǔ)終于在2013年正式推出了基于SmartMatrix架構(gòu)的第一代高端存儲(chǔ)產(chǎn)品。這是中國(guó)存儲(chǔ)廠商首次推出高端存儲(chǔ)產(chǎn)品,其意義和價(jià)值非凡。

它給華為存儲(chǔ)人注入了巨大的信心,也驅(qū)動(dòng)著華為人主動(dòng)去思考未來(lái)存儲(chǔ)的變革,為日后Dorado系列高端全閃存等一系列開(kāi)創(chuàng)性的創(chuàng)新奠定了堅(jiān)實(shí)基礎(chǔ)。其次,它為華為存儲(chǔ)打開(kāi)各個(gè)行業(yè)頭部客戶提供了產(chǎn)品利器,大大提升了華為存儲(chǔ)的市場(chǎng)拓展深度和廣度。

“有一個(gè)重要的任務(wù)交給你們”

“項(xiàng)飛,有個(gè)重要的任務(wù)交給你們!帶領(lǐng)團(tuán)隊(duì)把分布式文件存儲(chǔ)搞出來(lái)?!?/p>

接到領(lǐng)導(dǎo)的通知之后,項(xiàng)飛心中不禁有點(diǎn)忐忑,一直干通信軟件研發(fā)的他,這次要半路出家去搞存儲(chǔ)啦。

此時(shí)的華為存儲(chǔ)剛剛回歸,產(chǎn)品線主要還是以SAN存儲(chǔ)為主,之前華賽期間主要銷售賽門鐵克的文件存儲(chǔ)產(chǎn)品。如今回歸,要做大做強(qiáng)存儲(chǔ)業(yè)務(wù),屬于華為自己的分布式文件存儲(chǔ)產(chǎn)品必不可少。但在當(dāng)時(shí),研發(fā)分布式文件存儲(chǔ)產(chǎn)品的確是一項(xiàng)重大考驗(yàn),以致于華為內(nèi)部也有部分聲音認(rèn)為很難研發(fā)來(lái)。

畢竟,在分布式文件存儲(chǔ)領(lǐng)域,IBM、NetApp、EMC(收購(gòu)分布式存儲(chǔ)明星公司Isilon)這些大公司無(wú)論是產(chǎn)品技術(shù),還是市場(chǎng)銷售,都是當(dāng)之無(wú)愧的翹楚。要想撬動(dòng)分布式文件存儲(chǔ)的蛋糕,華為需要付出比常人更多的努力才行。

“在華為就是什么事情都敢去試一試。不懂分布式存儲(chǔ)沒(méi)關(guān)系,我就當(dāng)它是‘二次創(chuàng)業(yè)’,努力學(xué)習(xí)和堅(jiān)持就是了!”項(xiàng)飛最終橫下心去攻克分布式存儲(chǔ)這道難關(guān)。

于是接下來(lái),項(xiàng)飛開(kāi)始忙著招人、調(diào)整研發(fā)團(tuán)隊(duì)結(jié)構(gòu)?!白铍y的是人,我花了很多時(shí)間去面試全球各種人才,找到合適的骨干人才,才能帶領(lǐng)團(tuán)隊(duì)不斷前進(jìn)?!表?xiàng)飛如是說(shuō),“整個(gè)團(tuán)隊(duì)很多人讓我很感動(dòng),像設(shè)計(jì)部很多人都是搞電信軟件的專家,他們?nèi)即蛏⒌礁鱾€(gè)新團(tuán)隊(duì)之中,這次大家又重新開(kāi)始,全部回到編碼崗位,基本都是邊學(xué)邊干把分布式文件系統(tǒng)研發(fā)出來(lái)的?!?/p>

做出分布式文件存儲(chǔ)不算很難,但做出有市場(chǎng)競(jìng)爭(zhēng)力的分布式文件存儲(chǔ)卻不是件容易的事情。因?yàn)槭袌?chǎng)上的標(biāo)桿已經(jīng)足夠高,像Isilon的全分布式對(duì)稱橫向擴(kuò)展架構(gòu),元數(shù)據(jù)和數(shù)據(jù)均是分布在所有節(jié)點(diǎn)上,擁有極大的技術(shù)難度。華為的分布式存儲(chǔ)也采用的是全分布式對(duì)稱橫向擴(kuò)展架構(gòu),那它的成色到底如何呢?

全對(duì)稱分布式架構(gòu)非常具有挑戰(zhàn)性,因?yàn)樵獢?shù)據(jù)全部動(dòng)態(tài)分布式所有節(jié)點(diǎn)上,需要保證各種情況下元數(shù)據(jù)可用。在華為分布式存儲(chǔ)的研發(fā)過(guò)程中,最大的難點(diǎn)也就是跟元數(shù)據(jù)相關(guān)的問(wèn)題,“當(dāng)時(shí)團(tuán)隊(duì)專家不分日夜排查出各種問(wèn)題,保證了產(chǎn)品能夠順利推出?!?/p>

到了2014年,經(jīng)過(guò)兩年多努力,華為正式推出了采用全對(duì)稱分布式架構(gòu)的分布式文件存儲(chǔ)OceanStor 9000,成為業(yè)內(nèi)為數(shù)不多能夠采用此架構(gòu)的存儲(chǔ)公司。并且,OceanStor 9000無(wú)論是性能、擴(kuò)展能力、穩(wěn)定低時(shí)延、自動(dòng)分層能力都豎立了業(yè)界的新標(biāo)桿。

華為OceanStor 9000

接下來(lái)幾年中,華為OceanStor 9000就開(kāi)始了它在市場(chǎng)中的精彩表演。先是在國(guó)內(nèi)市場(chǎng),OceanStor 9000大舉進(jìn)入到媒資、科研、石油能源勘探等領(lǐng)域,憑借出色的產(chǎn)品力捕獲了一大批客戶。不僅如此,OceanStor 9000還在海外市場(chǎng)展現(xiàn)出非凡的戰(zhàn)斗力,在亞太、歐洲、中東等地區(qū)市場(chǎng)迅速獲得認(rèn)可。

一時(shí)間,存儲(chǔ)老大EMC發(fā)現(xiàn)Isilon出現(xiàn)了一個(gè)最為強(qiáng)勁的對(duì)手。以至于EMC后來(lái)在官網(wǎng)專門發(fā)布了一段視頻“懟”了一把OceanStor 9000,這恐怕是中國(guó)存儲(chǔ)廠商第一次享受到存儲(chǔ)巨頭的高“待遇”。

用戶永遠(yuǎn)是最好的老師

用戶永遠(yuǎn)是最好的老師,因?yàn)樗軌蜃钪卑椎刈屇愣聪こ鰳I(yè)務(wù)真實(shí)應(yīng)用需求、自身的差距甚至競(jìng)爭(zhēng)對(duì)手的優(yōu)缺點(diǎn)。

2014年,張國(guó)彬遠(yuǎn)赴歐洲,成為華為存儲(chǔ)市場(chǎng)一線中的一員,每天穿梭于各種展會(huì)、演講之中。聽(tīng)說(shuō)德國(guó)一家知名的電信公司正在招標(biāo),需要采購(gòu)一批存儲(chǔ)產(chǎn)品。張國(guó)彬決定和同事一起去接觸和拜訪該公司的架構(gòu)師,爭(zhēng)取把這家大客戶一舉拿下。

見(jiàn)面之后,該公司架構(gòu)師非常實(shí)在,還沒(méi)等張國(guó)彬口若懸河介紹華為存儲(chǔ)產(chǎn)品各種優(yōu)勢(shì),拿出一份標(biāo)書表格,要求華為存儲(chǔ)將產(chǎn)品性能能夠達(dá)到多少、各種工具生態(tài)對(duì)接情況、可靠性情況等一一列舉出來(lái),“第一次遇見(jiàn)如此嚴(yán)謹(jǐn)和專業(yè)的用戶,一下明白了我們離用戶的差距還有點(diǎn)遠(yuǎn),需要改進(jìn)的地方還非常之多?!?/p>

2017年華為正式推出了OceanStor存儲(chǔ)Dorado系列 V3產(chǎn)品。此刻的張國(guó)彬再見(jiàn)到這家電信公司架構(gòu)師時(shí),已經(jīng)是底氣十足、自信滿滿,將V3產(chǎn)品的存儲(chǔ)特性、性能、可靠性、易用性、工具與功能一一講解,以極佳的專業(yè)性順利打動(dòng)客戶之后,華為存儲(chǔ)產(chǎn)品又順利通過(guò)了POC測(cè)試,該家客戶也一次性采購(gòu)了華為存儲(chǔ)多套高端存儲(chǔ)產(chǎn)品。

2015年,瑞典一家世界級(jí)的機(jī)械制造公司開(kāi)始加大自動(dòng)駕駛在產(chǎn)品中的應(yīng)用,由于機(jī)器學(xué)習(xí)和深度學(xué)習(xí)需要不斷對(duì)數(shù)據(jù)進(jìn)行訓(xùn)練,并且數(shù)據(jù)是千億級(jí)的海量小圖片、小視頻,傳統(tǒng)分布式存儲(chǔ)通常是大文件、大帶寬的,很難適合像自動(dòng)駕駛這種AI訓(xùn)練場(chǎng)景,該公司架構(gòu)師在與華為存儲(chǔ)團(tuán)隊(duì)交流中吐槽,因?yàn)椴煌瑘?chǎng)景的需求,多套不同存儲(chǔ)來(lái)跑不同的應(yīng)用,又開(kāi)始產(chǎn)生了數(shù)據(jù)煙囪。

對(duì)此,該公司架構(gòu)師與華為存儲(chǔ)討論,能不能通過(guò)一套分布式存儲(chǔ)來(lái)支撐數(shù)據(jù)湖,除了自動(dòng)駕駛業(yè)務(wù)之外,還能滿足車聯(lián)網(wǎng)、傳統(tǒng)CAD與CAE等應(yīng)用。于是,華為存儲(chǔ)決定與該客戶進(jìn)行聯(lián)合創(chuàng)新,研發(fā)一套分布式存儲(chǔ)支撐所有應(yīng)用集成。

接下來(lái),華為存儲(chǔ)與該客戶緊密合作,跟客戶探討每一個(gè)功能如何設(shè)計(jì)、參數(shù)如何設(shè)計(jì),并且在每個(gè)場(chǎng)景中進(jìn)行測(cè)試、部署與應(yīng)用。瑞典這家公司直接讓華為理解了新業(yè)務(wù)場(chǎng)景所帶來(lái)的挑戰(zhàn)以及需求。“面向新的應(yīng)用場(chǎng)景,華為存儲(chǔ)必須走的快,而且需要與用戶一起做,不能閉門造車?!?/p>

回歸華為之后,華為存儲(chǔ)在海內(nèi)外與各個(gè)行業(yè)的頭部頂級(jí)客戶聯(lián)合創(chuàng)新日益增多,涉及到金融、電信、能源、媒資等多個(gè)領(lǐng)域,對(duì)于頭部客戶數(shù)據(jù)中心存儲(chǔ)需求和痛點(diǎn)有著極為深入的理解,也為日后產(chǎn)品創(chuàng)新和產(chǎn)品力的大幅提升奠定了堅(jiān)實(shí)基礎(chǔ)。

簡(jiǎn)而不減的秘訣

從2015年開(kāi)始,海內(nèi)外包括金融、運(yùn)營(yíng)商、能源等多個(gè)行業(yè)的頭部客戶在與華為存儲(chǔ)交流的過(guò)程中,都提到了分布式,用戶們渴望在主數(shù)據(jù)中心的核心中部署分布式存儲(chǔ),讓核心應(yīng)用也能夠享受到分布式存儲(chǔ)的好處。

“像荷蘭的一家電信公司,數(shù)據(jù)量當(dāng)時(shí)都超過(guò)300PB了,非??释蚍植际降脑萍軜?gòu)轉(zhuǎn)型?!睆垏?guó)彬表示,“他們希望分布式可以承載數(shù)據(jù)庫(kù)、虛擬機(jī)這些核心業(yè)務(wù),也能夠承載大數(shù)據(jù)、AI這些新應(yīng)用。”

這些客戶的需求直接促成了華為打造新一代智能分布式存儲(chǔ)—OceanStor分布式存儲(chǔ)。2016年,華為存儲(chǔ)迅速集結(jié)了集中式領(lǐng)域和分布式領(lǐng)域最優(yōu)秀的架構(gòu)師,一起攻關(guān)如何將分布式存儲(chǔ)和集中存儲(chǔ)融合在一個(gè)產(chǎn)品之中。

“這時(shí)候華為存儲(chǔ)平臺(tái)化的戰(zhàn)略優(yōu)勢(shì)就顯現(xiàn)出來(lái)了。華為研發(fā)的大部分力量都在平臺(tái)產(chǎn)品上,可以充分調(diào)動(dòng)資源進(jìn)行攻關(guān)?!睆垏?guó)彬透露,“這是其他公司很難去實(shí)現(xiàn)的,因?yàn)榘凑账麄兡欠N模式,投入的成本和時(shí)間極其大?!?/p>

同樣經(jīng)過(guò)兩年多的研發(fā),華為存儲(chǔ)在2019年正式發(fā)布了新一代智能分布式存儲(chǔ)-OceanStor分布式存儲(chǔ)。華為北京、上海、深圳、成都等地的存儲(chǔ)研發(fā)團(tuán)隊(duì)跨地域緊密協(xié)同,設(shè)計(jì)出一套全新的存儲(chǔ)架構(gòu),進(jìn)行了數(shù)千萬(wàn)行代碼開(kāi)發(fā),并先后進(jìn)行了近十個(gè)版本的迭代,反復(fù)打磨、優(yōu)化的成果。

華為OceanStor分布式存儲(chǔ)產(chǎn)品不僅實(shí)現(xiàn)分布式存儲(chǔ)性能全球第一,單節(jié)點(diǎn)性能高端16.8萬(wàn) IOPS和1毫秒以內(nèi)時(shí)延,在業(yè)界標(biāo)準(zhǔn)SPC-1測(cè)試中排名第一;還首次在一套存儲(chǔ)中實(shí)現(xiàn)了同時(shí)支持塊、文件、對(duì)象、HDFS協(xié)議;并且,率先將人工智能技術(shù)融入到存儲(chǔ)全生命周期管理。

在OceanStor分布式存儲(chǔ)為用戶數(shù)據(jù)中心提供一套簡(jiǎn)單卻功能強(qiáng)大的存儲(chǔ)背后,其實(shí)是研發(fā)團(tuán)隊(duì)反復(fù)打磨與優(yōu)化的成果。比如,為解決性能波動(dòng)的“隱形瓶頸”,華為存儲(chǔ)研發(fā)團(tuán)隊(duì)動(dòng)用了全球研發(fā)體系內(nèi)的操作系統(tǒng)調(diào)度專家、網(wǎng)絡(luò)專家,讓性能波動(dòng)徹底解決,實(shí)現(xiàn)了非ARM節(jié)點(diǎn)14萬(wàn)IOPS、ARM節(jié)點(diǎn)16.8萬(wàn)IOPS的穩(wěn)定性能。

分布式存儲(chǔ)有三大難,其一是數(shù)據(jù)不一致情況如何解決,由于數(shù)據(jù)打散在各個(gè)節(jié)點(diǎn)上,很容易出現(xiàn)數(shù)據(jù)不一致的情況,尤其是在高性能、大并發(fā)的數(shù)據(jù)讀寫情況下如何保持?jǐn)?shù)據(jù)一致性。這需要華為存儲(chǔ)在并發(fā)機(jī)制上做到精準(zhǔn)無(wú)比。為此,華為存儲(chǔ)研發(fā)團(tuán)隊(duì)研發(fā)出一套新的日志機(jī)制與工具,在海量數(shù)據(jù)中去追蹤和查看IO異常,實(shí)現(xiàn)了上千個(gè)節(jié)點(diǎn)不同場(chǎng)景下的數(shù)據(jù)不一致情況檢驗(yàn)。

其二是分布式存儲(chǔ)功能與性能如何平衡,像重復(fù)數(shù)據(jù)刪除功能對(duì)存儲(chǔ)性能影響很大。為此,華為存儲(chǔ)研發(fā)團(tuán)隊(duì)專門開(kāi)發(fā)出一種加權(quán)算法,讓重刪功能實(shí)現(xiàn)自適應(yīng)調(diào)整,為用戶減去了過(guò)去需要不斷手動(dòng)配置的復(fù)雜性,呈現(xiàn)出極為簡(jiǎn)單的易用性。

最后則是如何防范數(shù)據(jù)丟失。通常,分布式存儲(chǔ)所承載的應(yīng)用場(chǎng)景是多樣化和復(fù)雜化,這也直接促使了數(shù)據(jù)丟失潛在因素的增多。針對(duì)這種情況OceanStor分布式存儲(chǔ)在只有64個(gè)字節(jié)的可靠性校驗(yàn)的空間容納了30多個(gè)場(chǎng)景的預(yù)防方案,每個(gè)預(yù)防方案的“植入”需要精準(zhǔn)到每個(gè)比特位,堪稱手術(shù)刀般精準(zhǔn)。

高端存儲(chǔ)該變革啦!

這是一個(gè)真實(shí)的用戶故事。

某家世界級(jí)的物流公司,一套高端存儲(chǔ)上跑了4000臺(tái)服務(wù)器,按照傳統(tǒng)高端存儲(chǔ)的架構(gòu),如果做系統(tǒng)軟件升級(jí),為防止前端多路徑運(yùn)行不正常,必須在升級(jí)之前將4000多臺(tái)服務(wù)器的多路徑檢查一遍??蛻裘看巫錾?jí),都猶如面臨世界末日般,處于崩潰邊緣。

這家公司的情況真實(shí)反映出很多用戶的囧境:應(yīng)用越來(lái)越多、業(yè)務(wù)越來(lái)越靈活,應(yīng)用環(huán)境正在快速變化,高端存儲(chǔ)需要有能力在數(shù)據(jù)中心承載起更多的業(yè)務(wù),過(guò)去只承載幾種業(yè)務(wù)的情況已經(jīng)一去不復(fù)返。

如今,高端存儲(chǔ)該進(jìn)行變革啦。有人說(shuō),科技這個(gè)行業(yè)不尊重過(guò)去,只尊重創(chuàng)新,你不創(chuàng)新就只有等死。此時(shí)的華為,在全閃存技術(shù)、高端存儲(chǔ)架構(gòu)上的積累已經(jīng)完成,是時(shí)候打造出一款面向未來(lái)、滿足用戶數(shù)據(jù)中心極致需求的產(chǎn)品,讓高端存儲(chǔ)重新煥發(fā)新生機(jī)。

眾所周知,閃存對(duì)于存儲(chǔ)產(chǎn)業(yè)有著革命性的影響,全閃存存儲(chǔ)被認(rèn)為是大勢(shì)所趨。而傳統(tǒng)高端存儲(chǔ)恰恰是基于傳統(tǒng)硬盤時(shí)代的產(chǎn)品,哪怕后來(lái)有廠商在高端存儲(chǔ)中加入閃存,也僅僅是一種優(yōu)化的妥協(xié)選擇。

全閃存,這是一條全新的賽道。在新賽道意味著你有機(jī)會(huì)實(shí)現(xiàn)對(duì)競(jìng)爭(zhēng)對(duì)手的追趕,尤其是高端全閃存領(lǐng)域,將會(huì)是一次軟硬件架構(gòu)、功能堆棧的全面重塑。而華為在閃存領(lǐng)域已經(jīng)擁有深厚的積累。

其次,華為存儲(chǔ)在SmartMatrix高端存儲(chǔ)架構(gòu)上的經(jīng)驗(yàn),推動(dòng)了下一代高端存儲(chǔ)在架構(gòu)上的進(jìn)一步突破。華為存儲(chǔ)開(kāi)始將Scale-Up和Scale-Out進(jìn)行融合,采用了模塊化橫向擴(kuò)展、所有關(guān)鍵部件全解耦全共享架構(gòu),并且融入了多項(xiàng)智能化技術(shù)。

2019年發(fā)布OceanStor Dorado V6新一代全閃存產(chǎn)品

2019年7月,歷時(shí)近三年的華為全新一代OceanStor Dorado V6系列產(chǎn)品正式亮相:擁有業(yè)界最高的2000萬(wàn)IOPS極致性能,業(yè)界最低0.1ms的穩(wěn)定時(shí)延、控制器8壞7的極端情況依然工作、基于AI算法的全生命周期智能運(yùn)維,并且可以實(shí)現(xiàn)故障0感知、業(yè)務(wù)0影響、升級(jí)0影響,真正保障用戶業(yè)務(wù)永久在線。

如果說(shuō)華為存儲(chǔ)過(guò)去一直都算跟隨的話,那么OceanStor Dorado V6產(chǎn)品的驚艷亮相則標(biāo)志著華為存儲(chǔ)開(kāi)始引領(lǐng),它是華為存儲(chǔ)多年技術(shù)積累與創(chuàng)新的一次爆發(fā),讓大家看到了華為存儲(chǔ)走出了一條不一樣、具有開(kāi)創(chuàng)性價(jià)值之路。

一抹丹青色,最是匠人心

存儲(chǔ)產(chǎn)品是數(shù)據(jù)的最終目的地,除了性能和效率之外,數(shù)據(jù)可用性和持久度、產(chǎn)品的可靠性等要求極為嚴(yán)格。做存儲(chǔ)的開(kāi)發(fā)有時(shí)候就像打造一件復(fù)雜的藝術(shù)品,需要技術(shù)研發(fā)人員不斷的雕琢與打磨,追求完美的狀態(tài)。

“存儲(chǔ)對(duì)于工程師的匠心文化要求很高。因?yàn)榇a一不小心,可能整個(gè)盒子就崩了,會(huì)給用戶帶來(lái)災(zāi)難性的后果?!比A為存儲(chǔ)首席架構(gòu)師黃克驥如是說(shuō)。

經(jīng)過(guò)長(zhǎng)期積累,華為存儲(chǔ)軟件已經(jīng)達(dá)到幾千萬(wàn)行代碼的規(guī)模,存儲(chǔ)研發(fā)團(tuán)隊(duì)依然對(duì)每一行代碼都是高標(biāo)準(zhǔn)的質(zhì)量要求。例如,在重復(fù)數(shù)據(jù)刪除與壓縮領(lǐng)域,作為降低存儲(chǔ)成本、提升存儲(chǔ)效率最為有效的技術(shù),重刪壓縮被認(rèn)為是衡量存儲(chǔ)產(chǎn)品水平的重要標(biāo)志,但是重刪壓縮功能一旦出現(xiàn)問(wèn)題,造成數(shù)據(jù)損壞或者丟失,其給用戶帶來(lái)的后果是極為嚴(yán)重。因此,華為對(duì)于重刪壓縮測(cè)試極為嚴(yán)格,嚴(yán)防有Bug遺漏,不斷打磨代碼,做到萬(wàn)無(wú)一失。

在硬件層面,華為存儲(chǔ)有專門的可靠性團(tuán)隊(duì)和專業(yè)的可靠性實(shí)驗(yàn)室對(duì)各種硬件組件進(jìn)行測(cè)試,尋找可能存在的漏洞,在可靠性方面不停的精益求精。

“華為存儲(chǔ)研發(fā)一線有很多低調(diào)、才華橫溢的人才?!秉S克驥介紹到。

比如有這么一位癡迷于代碼的技術(shù)大咖,融合存儲(chǔ)文件系統(tǒng)是他編寫的、復(fù)制核心模塊是他編寫的、全閃存架構(gòu)核心模塊是他編寫的、重復(fù)數(shù)據(jù)刪除模塊也是他編寫的,這位代碼大神從華為歷史上企業(yè)級(jí)到分布式核心模塊都寫過(guò)?!八磉_(dá)方式就是代碼,我們都說(shuō)他是個(gè)掃地僧,普華務(wù)實(shí)的外表下藏著萬(wàn)丈光芒。”

“除了專注之外,華為非常看重研發(fā)人才的全棧能力。何為全棧能力,就是技能全?;蜆I(yè)務(wù)全棧化?!表?xiàng)飛介紹道。在技能全?;矫妫A為要求開(kāi)發(fā)必須懂測(cè)試,測(cè)試必須懂產(chǎn)品設(shè)計(jì)、后端維護(hù),通過(guò)崗位輪換讓研發(fā)人員把這些技能拉通,從而變得更加全面;又比如,在產(chǎn)品架構(gòu)內(nèi),華為會(huì)通過(guò)讓員工在不同子系統(tǒng)研發(fā)的方式讓員工盡可能多掌握技術(shù);此外,華為還會(huì)讓研發(fā)定期去前端支持銷售和后端支持服務(wù)等等。

以存儲(chǔ)架構(gòu)師為例,在華為存儲(chǔ)有不成文的規(guī)定:架構(gòu)師也需要寫代碼。有些架構(gòu)師,從RAID 2.0功能到華為OceanStor存儲(chǔ)Dorado系列V3、V6兩代產(chǎn)品都是自己做架構(gòu)、寫代碼,長(zhǎng)期保持這種狀態(tài)。以至于華為存儲(chǔ)內(nèi)部人打趣道:“不會(huì)寫代碼的存儲(chǔ)架構(gòu)師不是好的存儲(chǔ)售前。”

一抹丹青色,最是匠人心——用來(lái)詮釋華為存儲(chǔ)的匠心精神再恰當(dāng)不過(guò)。

未來(lái)征途似星辰大海

如今,存儲(chǔ)產(chǎn)業(yè)又站在下一個(gè)變革的十字路口。

人工智能技術(shù)的不斷成熟與應(yīng)用,正在深刻影響著存儲(chǔ)產(chǎn)業(yè)。融入人工智能技術(shù)的智能存儲(chǔ)被認(rèn)為是重要的趨勢(shì),它希望本質(zhì)上解決過(guò)去存儲(chǔ)操作、運(yùn)維復(fù)雜化的情況,讓存儲(chǔ)變得更加簡(jiǎn)單化。

“智能會(huì)成為存儲(chǔ)的基礎(chǔ)能力?!比A為數(shù)據(jù)存儲(chǔ)與機(jī)器視覺(jué)產(chǎn)品線總裁周躍峰表示:“未來(lái)的存儲(chǔ)首先需要Storage for AI,能夠幫助用戶更好地利用智能技術(shù),滿足像AI訓(xùn)練、應(yīng)用的需求;其次是AI in Storage,就是將AI技術(shù)融入到存儲(chǔ)全生命周期,讓存儲(chǔ)管理、性能、效率、維護(hù)更加出色?!?/p>

華為在智能存儲(chǔ)的探索上一直走在業(yè)界的最前沿。華為OceanStor存儲(chǔ)Dorado V6產(chǎn)品是業(yè)界首個(gè)AI加持的高端存儲(chǔ)系統(tǒng),并且在重刪壓縮算法、智能存儲(chǔ)運(yùn)維等方面大量運(yùn)用了機(jī)器學(xué)習(xí)的方式,通過(guò)AI+智能算法實(shí)現(xiàn)了存儲(chǔ)系統(tǒng)的智能自調(diào)優(yōu),可以讓存儲(chǔ)可以越用越好。

但智能存儲(chǔ)依然有很長(zhǎng)的路要走,現(xiàn)階段智能存儲(chǔ)主要是解決了故障定位與業(yè)務(wù)管理等運(yùn)維優(yōu)化工作,以及一些基于AI的智能Cache算法、重刪壓縮算法等等,讓一些專業(yè)化的存儲(chǔ)操作變成自動(dòng)化。未來(lái),存儲(chǔ)也會(huì)類似自動(dòng)駕駛那樣,會(huì)根據(jù)不同的負(fù)載情況和業(yè)務(wù)場(chǎng)景來(lái)智能化選擇相應(yīng)的存儲(chǔ)功能與技術(shù)。

除此之外,在數(shù)據(jù)成為數(shù)字經(jīng)濟(jì)最關(guān)鍵的生產(chǎn)要素時(shí),存儲(chǔ)作為數(shù)據(jù)基礎(chǔ)設(shè)施重要的一環(huán),依然存在著非常多的挑戰(zhàn)。幫助企業(yè)實(shí)現(xiàn)數(shù)據(jù)“存得下、流得動(dòng)、用得好”,需要包括華為存儲(chǔ)在內(nèi)的所有存儲(chǔ)廠商繼續(xù)探索。

“我們的征途似星辰大海,從此只顧風(fēng)雨兼程?!薄A為存儲(chǔ)一直在路上。

尾記:《華為存儲(chǔ)成人禮:我們的征途似星辰大?!匪钠B載已經(jīng)結(jié)束。雖是萬(wàn)字長(zhǎng)文,但亦無(wú)法將華為存儲(chǔ)十八年歷程一一展示。謹(jǐn)以此文向中國(guó)存儲(chǔ)產(chǎn)業(yè)從業(yè)者致敬,望大家不忘初心,砥礪前行!

免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評(píng)論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個(gè)人觀點(diǎn),與極客網(wǎng)無(wú)關(guān)。文章僅供讀者參考,并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。

2020-06-24
華為存儲(chǔ)成人禮:我們的征途似星辰大海
采用開(kāi)源路線,意味著可以加速產(chǎn)品研發(fā)成功的速度,這對(duì)于初涉存儲(chǔ)領(lǐng)域的華為而言,不失為一條“捷徑”,但開(kāi)源也普遍存在著代碼與功能相對(duì)簡(jiǎn)單、效率較低、Bug較多等情況;而從一開(kāi)始就走創(chuàng)新路線的話,意味著需

長(zhǎng)按掃碼 閱讀全文