IDC數(shù)據(jù)顯示：SDS蠶食傳統(tǒng)存儲(chǔ)，對(duì)象存儲(chǔ)蠶食文件系統(tǒng)市場(chǎng)
近期IDC發(fā)布了2020年SDS中國(guó)區(qū)市場(chǎng)報(bào)告，我們可以從統(tǒng)計(jì)數(shù)據(jù)分析出存儲(chǔ)市場(chǎng)正在發(fā)生的格局變化。
從SDS的整體數(shù)據(jù)來(lái)看，SDS的市場(chǎng)份額占比相比2019年增長(zhǎng)了5.4%，是增長(zhǎng)最快的一個(gè)市場(chǎng)，而較熱門的HCI也僅增長(zhǎng)了2%。而傳統(tǒng)存儲(chǔ)則從2019年的占比65%下降到57.7%，下降了超過(guò)7個(gè)百分點(diǎn)。從這個(gè)數(shù)據(jù)可以看出，SDS和HCI在不斷地蠶食傳統(tǒng)存儲(chǔ)市場(chǎng)。
圖1 2020/2019中國(guó)存儲(chǔ)市場(chǎng)概況
將SDS的三個(gè)產(chǎn)品分類：塊、文件、對(duì)象的市場(chǎng)份額拆開(kāi)來(lái)看，文件依然占比最大，但份額從2019年的59.9%下降到了48.5%。
圖2 2019-2020中國(guó)SDS市場(chǎng)概況
2020年的塊存儲(chǔ)增長(zhǎng)較快，IDC給出的原因是中移動(dòng)大規(guī)模集采造成的影響，屬于短期波動(dòng)。就整體市場(chǎng)空間而言，2020年對(duì)象存儲(chǔ)增長(zhǎng)了63.1%，文件存儲(chǔ)增長(zhǎng)了22.7%。根據(jù)IDC的預(yù)測(cè)，未來(lái)5年平均增長(zhǎng)最快的還是對(duì)象存儲(chǔ)。
圖3 2020-2025中國(guó)SDS市場(chǎng)空間預(yù)測(cè)
為什么對(duì)象存儲(chǔ)會(huì)替代文件系統(tǒng)
對(duì)象存儲(chǔ)和文件系統(tǒng)都以非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)為主要目標(biāo)市場(chǎng)，但是對(duì)象存儲(chǔ)在技術(shù)上存在以下先天優(yōu)勢(shì)，能夠更好地滿足應(yīng)用需求：
1.對(duì)象存儲(chǔ)采用哈希索引定位和讀取數(shù)據(jù)塊，具有更豐富的元數(shù)據(jù)管理手段，使得對(duì)象存儲(chǔ)在海量小文件場(chǎng)景下?lián)碛羞h(yuǎn)比文件存儲(chǔ)強(qiáng)大的性能優(yōu)勢(shì);
2.物理世界中的數(shù)據(jù)往往有多重屬性，對(duì)象存儲(chǔ)可以對(duì)數(shù)據(jù)附加多維度的標(biāo)簽來(lái)描述這些屬性，因此在檢索和管理數(shù)據(jù)時(shí)，對(duì)象存儲(chǔ)比只能基于文件名檢索的文件系統(tǒng)更高效;
3.對(duì)象存儲(chǔ)RESTful風(fēng)格的應(yīng)用接口，大大簡(jiǎn)化了存儲(chǔ)協(xié)議棧，縮短了應(yīng)用和存儲(chǔ)之間的距離，而存儲(chǔ)系統(tǒng)的智能化使得應(yīng)用可以將對(duì)數(shù)據(jù)的計(jì)算處理卸載到存儲(chǔ)系統(tǒng)進(jìn)行，在很多場(chǎng)景下，這種計(jì)算模式可以大大降低存儲(chǔ)與計(jì)算之間的交互次數(shù)或吞吐量，簡(jiǎn)化應(yīng)用的復(fù)雜度和業(yè)務(wù)流程，極大提升應(yīng)用的關(guān)鍵性能指標(biāo)。
對(duì)象存儲(chǔ)逐漸替代文件系統(tǒng)的主要應(yīng)用場(chǎng)景
從應(yīng)用場(chǎng)景看，對(duì)象存儲(chǔ)正在替代傳統(tǒng)文件存儲(chǔ)的領(lǐng)域。我們按照Gartner的文件系統(tǒng)傳統(tǒng)應(yīng)用場(chǎng)景來(lái)分析對(duì)象存儲(chǔ)替代文件的主要原因。
表1 傳統(tǒng)文件存儲(chǔ)被對(duì)象存儲(chǔ)替代的應(yīng)用場(chǎng)景
新興應(yīng)用場(chǎng)景是未來(lái)對(duì)象存儲(chǔ)的增長(zhǎng)點(diǎn)
我們還要看到，除了傳統(tǒng)文件存儲(chǔ)的市場(chǎng)，對(duì)象存儲(chǔ)在新興場(chǎng)景的增量是一個(gè)更大的市場(chǎng)。
一、AI視覺(jué)場(chǎng)景
隨著AI技術(shù)在各行各業(yè)應(yīng)用的深化，公安、交通等行業(yè)開(kāi)始利用AI改進(jìn)視頻監(jiān)控技術(shù)，將視頻中的關(guān)鍵圖片抽取出來(lái)，進(jìn)行結(jié)構(gòu)化分析后保存圖片和相關(guān)結(jié)構(gòu)化數(shù)據(jù)，從而快速檢索符合特征的人/車圖片，提升檢索效率，同時(shí)也能夠提升存儲(chǔ)的數(shù)據(jù)價(jià)值。視頻監(jiān)控場(chǎng)景原來(lái)大量采用視頻監(jiān)控存儲(chǔ)，采用AI技術(shù)后，存儲(chǔ)的是圖片和圖片的結(jié)構(gòu)化數(shù)據(jù)，傳統(tǒng)視頻監(jiān)控存儲(chǔ)無(wú)法滿足海量圖片存儲(chǔ)的性能需求。這部分需求會(huì)逐步被對(duì)象存儲(chǔ)取代，而且對(duì)象存儲(chǔ)可以存儲(chǔ)圖片的標(biāo)簽，支持基于標(biāo)簽的檢索，長(zhǎng)期來(lái)講會(huì)提升對(duì)象存儲(chǔ)的市場(chǎng)占有率。
在制造業(yè)，智能制造利用AI技術(shù)替代人工進(jìn)行產(chǎn)品質(zhì)檢也會(huì)產(chǎn)生海量的圖片，杉巖數(shù)據(jù)的一些制造業(yè)用戶每天產(chǎn)生近100TB/數(shù)千萬(wàn)文件的圖片數(shù)據(jù)，對(duì)快速檢索有很強(qiáng)的需求，比如以生產(chǎn)線、工序號(hào)、時(shí)間、良/次品、物料ID等為檢索手段。大量的圖片使傳統(tǒng)存儲(chǔ)面臨很大挑戰(zhàn)，尤其是在圖片的檢索中，文件系統(tǒng)只能基于文件名進(jìn)行檢索，檢索效率非常低下，在這種新場(chǎng)景下用戶使用非常不便。采用對(duì)象存儲(chǔ)后無(wú)論在性能，還是檢索的多維度、檢索效率上都非常匹配用戶需求，這也是新場(chǎng)景帶來(lái)的對(duì)象存儲(chǔ)機(jī)會(huì)點(diǎn)。
二、IPFS存儲(chǔ)場(chǎng)景
IPFS場(chǎng)景對(duì)存儲(chǔ)的容量規(guī)模需求非常大，由于規(guī)模大，對(duì)于存儲(chǔ)的性價(jià)比要求也比較高。在做時(shí)空證明時(shí)，IPFS系統(tǒng)需要進(jìn)行大量的隨機(jī)讀，并將讀取的內(nèi)容組裝起來(lái)，業(yè)務(wù)系統(tǒng)不斷地向存儲(chǔ)集群進(jìn)行大量讀請(qǐng)求，請(qǐng)求數(shù)量對(duì)網(wǎng)絡(luò)形成非常大的壓力。杉巖數(shù)據(jù)的IPFS存儲(chǔ)解決方案在計(jì)算集群中整合多次讀請(qǐng)求，由存儲(chǔ)集群一次性處理，并將大量的請(qǐng)求分散到所有磁盤，然后組裝讀取的數(shù)據(jù)，該方案可以保證高性能的大規(guī)模數(shù)據(jù)存儲(chǔ)。目前在IPFS存儲(chǔ)場(chǎng)景，大規(guī)模的礦商基本采用對(duì)象存儲(chǔ)方案，這會(huì)在中期大幅度提升對(duì)象存儲(chǔ)的市場(chǎng)空間。
三、大數(shù)據(jù)存算分離，替代HDFS存儲(chǔ)
大數(shù)據(jù)集群由于歷史原因一直采用存算融合架構(gòu)，底層采用HDFS分布式存儲(chǔ)。受云原生架構(gòu)影響，Hadoop/Spark計(jì)算層為了適應(yīng)彈性，采用云/容器化的趨勢(shì)增加，而HDFS云化/容器化難度較大，所以存算分離架構(gòu)的需求越來(lái)越多。采用存算分離架構(gòu)可以帶來(lái)如下好處：
·存儲(chǔ)和計(jì)算獨(dú)立擴(kuò)展，計(jì)算能力不夠單獨(dú)擴(kuò)展計(jì)算集群，存儲(chǔ)空間不足單獨(dú)擴(kuò)展存儲(chǔ)容量，可以降低大數(shù)據(jù)平臺(tái)的建設(shè)成本。
·計(jì)算彈性使業(yè)務(wù)可以根據(jù)需求收縮和擴(kuò)展，避免長(zhǎng)時(shí)間占用大量物理資源。
·Hadoop/Spark/Impala可以獨(dú)立升級(jí)，無(wú)需考慮HDFS數(shù)據(jù)格式兼容無(wú)法升級(jí)問(wèn)題，快速應(yīng)用計(jì)算層組件的最新特性。
·對(duì)象存儲(chǔ)的商用產(chǎn)品，在穩(wěn)定性、可維護(hù)性、升級(jí)兼容性方面大大優(yōu)于開(kāi)源的HDFS，可以降低存儲(chǔ)維護(hù)難度。
目前最優(yōu)的替代方案就是采用對(duì)象存儲(chǔ)替換HDFS存儲(chǔ)，目前該方案已經(jīng)在公有云上得到驗(yàn)證，企業(yè)私有云用戶正在逐步替換。
云原生應(yīng)用私有化部署，替代傳統(tǒng)NAS
云原生應(yīng)用如阿里釘釘，早期為中小型企業(yè)提供SaaS服務(wù)，積累了大量中小型用戶，這些新興SaaS軟件供應(yīng)商基本都是基于云/容器，以及對(duì)象存儲(chǔ)來(lái)開(kāi)發(fā)應(yīng)用。隨著產(chǎn)品的口碑不斷提升，中大型企業(yè)認(rèn)識(shí)到這些新的應(yīng)用服務(wù)非常方便，但部署形態(tài)上希望采用私有云以保證信息安全和合規(guī)。隨著這些云原生應(yīng)用持續(xù)拓展到中大型用戶機(jī)房，會(huì)倒逼基礎(chǔ)架構(gòu)向容器/對(duì)象的架構(gòu)轉(zhuǎn)型，而且采用跟公有云架構(gòu)普遍采用的對(duì)象存儲(chǔ)，也更加容易幫助企業(yè)構(gòu)建混合云基礎(chǔ)架構(gòu)，也會(huì)是未來(lái)對(duì)象存儲(chǔ)持續(xù)增長(zhǎng)的動(dòng)力。
表2 新興場(chǎng)景文件/對(duì)象存儲(chǔ)優(yōu)劣對(duì)比
小結(jié)
1.文件存儲(chǔ)的傳統(tǒng)領(lǐng)域：對(duì)象存儲(chǔ)在非結(jié)構(gòu)化數(shù)據(jù)歸檔、文件共享、備份等場(chǎng)景會(huì)不斷蠶食傳統(tǒng)文件存儲(chǔ)市場(chǎng)空間。
2.新場(chǎng)景領(lǐng)域如AI視覺(jué)場(chǎng)景、IPFS場(chǎng)景、大數(shù)據(jù)場(chǎng)景、云原生應(yīng)用私有化部署場(chǎng)景，對(duì)象存儲(chǔ)會(huì)成為主流。
3.建議CIO盡早構(gòu)建對(duì)象存儲(chǔ)基礎(chǔ)架構(gòu)，滿足AI應(yīng)用、數(shù)據(jù)湖，以及云原生應(yīng)用下云對(duì)基礎(chǔ)架構(gòu)升級(jí)換代的需求。
圖4 對(duì)象存儲(chǔ)和文件存儲(chǔ)的適用場(chǎng)景
（免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 ）
