原標(biāo)題:小小協(xié)議大威力,數(shù)字化轉(zhuǎn)型為何缺不了NVMe全閃存?
“天下武功、唯快不破”,數(shù)字經(jīng)濟(jì)時代尤甚。
都說數(shù)據(jù)堪比新時代的石油,極富價值。但比數(shù)據(jù)本身更重要的是,數(shù)據(jù)價值如何快速、高效地釋放。毫無疑問,誰能快速、高效釋放數(shù)據(jù)價值,誰就在激烈市場競爭中占據(jù)主動。
來看個鮮活的例子:某大型股份制銀行,有超過2萬名員工屬于重度的數(shù)據(jù)消費(fèi)者,從日常的精準(zhǔn)營銷、精細(xì)化運(yùn)營到風(fēng)險(xiǎn)控制等,時時刻刻都需要使用數(shù)據(jù)。但隨著業(yè)務(wù)量的增加,數(shù)據(jù)報(bào)表打開率卻不盡如人意,過長的等待時間對業(yè)務(wù)體驗(yàn)和效率帶來顯著影響。該行系統(tǒng)負(fù)責(zé)人透露:“專門團(tuán)隊(duì)使用各種招數(shù)對數(shù)據(jù)報(bào)表進(jìn)行性能優(yōu)化,效果依然不太理想。最后發(fā)現(xiàn)是硬件協(xié)議的瓶頸。更換了端到端NVMe全閃存之后,業(yè)務(wù)性能得到質(zhì)的飛躍。”
無獨(dú)有偶,隨著千行百業(yè)數(shù)字化轉(zhuǎn)型的深入,NVMe這項(xiàng)小小的存儲協(xié)議愈發(fā)牽動著用戶的心。很多用戶逐漸意識到,SSD等介質(zhì)革命固然帶來了IO的巨幅提升,但NVMe協(xié)議才是發(fā)揮性能的關(guān)鍵,而端到端NVMe則猶如打通存儲系統(tǒng)乃至整個數(shù)據(jù)中心的任督二脈,讓數(shù)字化轉(zhuǎn)型真正走向“高速之路”。
NVMe為何至關(guān)重要
數(shù)字化轉(zhuǎn)型需要基礎(chǔ)設(shè)施鋪就一條高速之路。
一直以來,作為承載數(shù)據(jù)的存儲系統(tǒng)被寄予厚望。十多年前,當(dāng)閃存進(jìn)入到存儲系統(tǒng)之后,人們普遍認(rèn)為數(shù)據(jù)中心的性能瓶頸將被徹底打破。然而,采用了SSD的存儲系統(tǒng)在真正業(yè)務(wù)場景中性能表現(xiàn)并非“一飛沖天”,甚至某些業(yè)務(wù)場景是“有力使不出”。
究其原因,存儲協(xié)議才是關(guān)鍵。
在SSD進(jìn)入市場的早期,為了迅速融入到數(shù)據(jù)中心的生態(tài)系統(tǒng)中,硬盤數(shù)據(jù)劃分的扇區(qū)、LBA等概念都被SSD所“繼承”,甚至接口協(xié)議/硬盤外形規(guī)格也被保留下來。這樣的好處就是,在數(shù)據(jù)中心生態(tài)中,不論是操作系統(tǒng)層面,還是物理規(guī)格層面,從機(jī)械硬盤過渡到SSD都是透明的,對用戶影響極小。
但保留了兼容性,性能必定會做出一定的犧牲。傳統(tǒng)SAS協(xié)議還是機(jī)械硬盤時代的產(chǎn)物,復(fù)雜的系統(tǒng)架構(gòu)、過多的協(xié)議解析、有限的隊(duì)列并發(fā)能力,限制了SSD性能優(yōu)勢的發(fā)揮。
因此,專門為SSD設(shè)計(jì)的NVMe協(xié)議孕育而生,它去掉SAS系統(tǒng)中的SCSI等復(fù)雜協(xié)議層,降低了協(xié)議開銷,減少交互次數(shù),以及成熟的多隊(duì)列機(jī)制,讓它能消除數(shù)據(jù)路徑的延遲,實(shí)現(xiàn)對SSD介質(zhì)并行訪問數(shù)量指數(shù)級增長,并且支持以太網(wǎng)、InfiniBand、FC等多種高速網(wǎng)絡(luò),與SSD可謂是天合之作。
如果說SSD的出現(xiàn),為數(shù)據(jù)存儲鋪就了一條“高速公路”;那么,NVMe就成為“高速公路”最新的運(yùn)營規(guī)則,它確保了數(shù)據(jù)可以快速、高效地進(jìn)行處理。
從2009年全球90多家公司組成NVMe工作組,到2011年NVMe 1.0版本正式推出,再到2021年6月NVMe 2.0版本推出,NVMe產(chǎn)業(yè)生態(tài)不斷走向完善,從NVMe芯片組、NVMe SSD產(chǎn)品、NVMe協(xié)議等均取得了長足進(jìn)步。
如今,NVMe已經(jīng)不僅僅是一種閃存的接口協(xié)議,更是發(fā)展到整個存儲網(wǎng)絡(luò)領(lǐng)域,端到端NVMe、NVMe全閃化成為大勢所趨,從而進(jìn)一步釋放數(shù)據(jù)存儲的性能潛力。
端到端NVMe已成大勢所趨
最早期的全閃存陣列上,往往采用SATA/SAS接口的SSD;再之后,支持NVMe 的SSD出現(xiàn),很多全閃存開始在存儲后端更換成NVMe SSD,性能得到進(jìn)一步提升。但并不意味著存儲系統(tǒng)的性能達(dá)到極限。
如何將全閃存等存儲系統(tǒng)的性能潛力徹底挖掘出來?
端到端NVMe被認(rèn)為是大勢所趨。在后端采用NVMe SSD之后,存儲廠商們開始將目光瞄準(zhǔn)到全閃存的控制器架構(gòu)。過去,大部分全閃存的控制器架構(gòu)是專門為機(jī)械硬盤而設(shè)計(jì)的。顯然,陣列控制器以及存儲網(wǎng)絡(luò)協(xié)議也需要與時俱進(jìn),適應(yīng)時代的發(fā)展,讓NVMe充分發(fā)揮出性能紅利。
因此,NVMe over Fabrics孕育而生,作為存儲陣列與前端主機(jī)連接的通道,NVMe over Fabrics實(shí)現(xiàn)NVMe標(biāo)準(zhǔn)在多種網(wǎng)絡(luò)上的擴(kuò)展,并且取代了過去FC、iSCSI等協(xié)議,降低存儲網(wǎng)絡(luò)協(xié)議棧處理開銷。前端主機(jī)可以使用本機(jī)NVMe協(xié)議直接與NVMe SSD進(jìn)行通信,進(jìn)一步提升性能和降低延時,適應(yīng)SSD介質(zhì)驅(qū)動的存儲控制器架構(gòu)演進(jìn)。
目前,所有存儲廠商都在積極布局端到端NVMe全閃方案。例如,華為在業(yè)界實(shí)現(xiàn)了全系列端到端的NVMe產(chǎn)品:在端到端的NVMe高速通道上,華為采用自研ASIC接口模塊、自研ASIC SSD盤/框設(shè)計(jì),從協(xié)議解析、IO轉(zhuǎn)發(fā)、業(yè)務(wù)優(yōu)先、硬件加速等方面對NVMe進(jìn)行全面支持,為數(shù)據(jù)傳輸提供高速通道。
來看看這樣設(shè)計(jì)帶來的好處,采用端到端NVMe設(shè)計(jì)的OceanStor Dorado,NVMe協(xié)議相比SCSI協(xié)議減少了40%的主機(jī)網(wǎng)絡(luò)協(xié)議棧開銷,節(jié)約主機(jī)CPU消耗,在同等性能情況下支持更多的主機(jī)應(yīng)用;此外,通過NVMe協(xié)議,CPU和SSD盤可直接通信,縮短傳輸路徑,協(xié)議的并發(fā)數(shù)提升到64K,協(xié)議交互次數(shù)從4次減少為2次,讀寫請求處理效率提升1倍以上。
從華為實(shí)驗(yàn)室環(huán)境測試數(shù)據(jù)來看,在8K IO、100%讀場景下,OceanStor Dorado 端到端時延能從562us降低到50us,時延縮短了10倍。更加關(guān)鍵的是,華為存儲從高端到中低端均能做到端到端NMVe,支持端到端全系列NVMe。
如今,很多業(yè)務(wù)場景都是分秒必爭,比如實(shí)時交易、機(jī)器學(xué)習(xí)等,這些應(yīng)用場景無論是業(yè)務(wù)規(guī)模還是數(shù)據(jù)量均今非昔比,對于處理和訪問數(shù)據(jù)的速度要求越來越快。以剛剛結(jié)束的6.18購物節(jié)為例,十年時間單峰值擴(kuò)大了上千倍之多,多家銀行在海量交易峰值早已突破上萬的TPS(每秒處理事務(wù)數(shù))。
所以,隨著千行百業(yè)數(shù)字化轉(zhuǎn)型的深入,端到端NVMe必定會幫助企業(yè)構(gòu)建起強(qiáng)大和快速的基礎(chǔ)設(shè)施,加速數(shù)字化轉(zhuǎn)型。
普及NVMe,降成本和破技術(shù)慣性是關(guān)鍵
眾所周知,在企業(yè)級領(lǐng)域,新技術(shù)的過渡與普及受制于成本和技術(shù)慣性,往往需要一個較長的周期。
以成本為例,很多情況下,升級換代到端到端NVMe的存儲需要增加額外成本,如果這部分成本不能控制在比較合理的空間,就會延緩NVMe的普及和應(yīng)用。
又如,技術(shù)慣性也是不能忽視的因素。截止到去年,服務(wù)器平臺的PCIe在Gen3已經(jīng)停留多年,逐漸形成強(qiáng)大的技術(shù)慣性,束縛了數(shù)據(jù)中心用戶在存儲端的更新?lián)Q代。不過,隨著未來幾年,數(shù)據(jù)中心服務(wù)器平臺快速向PCIe Gen4和Gen5演進(jìn),給存儲、網(wǎng)絡(luò)空間帶來了極大的提升空間,也讓端到端的NVMe全閃存方案有望打破技術(shù)慣性,加速在數(shù)據(jù)中心用戶中的普及。
值得一提的是,華為存儲近年來一直致力于端到端NVMe 全閃存方案的普及,不僅在技術(shù)、產(chǎn)品層面不斷打磨與創(chuàng)新,其OceanStor Dorado系列NOF+聯(lián)合方案更是在中國銀行、華夏銀行等多個行業(yè)頭部客戶得到成功商用。
此外,為進(jìn)一步消除數(shù)據(jù)中心用戶在成本和技術(shù)慣性上的束縛,華為存儲近日還正式推出了華為Flash Only Pro活動:凡是新訂單即可由SAS全閃存免費(fèi)升級為NVMe全閃存,并且該活動適用OceanStor Dorado全閃存全系列產(chǎn)品。
面向未來,隨著NVMe技術(shù)的成熟和不斷完善,端到端NVMe方案必然將加速在數(shù)據(jù)中心的普及速度,未來數(shù)據(jù)中心必定是NVMe的天下。而對于廣大身處數(shù)字化轉(zhuǎn)型的千行百業(yè)用戶,登上NVMe這趟高速跑車,必然會在數(shù)智化時代中實(shí)現(xiàn)唯快致勝。
- 蜜度索驥:以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- 美媒聚焦比亞迪“副業(yè)”:電子代工助力蘋果,下個大計(jì)劃瞄準(zhǔn)AI機(jī)器人
- 微信零錢通新政策:銀行卡轉(zhuǎn)入資金提現(xiàn)免手續(xù)費(fèi)引熱議
- 消息稱塔塔集團(tuán)將收購和碩印度iPhone代工廠60%股份 并接管日常運(yùn)營
- 蘋果揭秘自研芯片成功之道:領(lǐng)先技術(shù)與深度整合是關(guān)鍵
- 英偉達(dá)新一代Blackwell GPU面臨過熱挑戰(zhàn),交付延期引發(fā)市場關(guān)注
- 馬斯克能否成為 AI 部部長?硅谷與白宮的聯(lián)系日益緊密
- 余承東:Mate70將在26號發(fā)布,意外泄露引發(fā)關(guān)注
- 無人機(jī)“黑科技”亮相航展:全球首臺低空重力測量系統(tǒng)引關(guān)注
- 賽力斯發(fā)布聲明:未與任何伙伴聯(lián)合開展人形機(jī)器人合作
- 賽力斯觸及漲停,汽車整車股盤初強(qiáng)勢拉升
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。