元核云CEO：金融企業(yè)未來存儲的必經(jīng)之路

大數(shù)據(jù)、云計算、人工智能在今天看來早已不是什么新鮮事物，這些領(lǐng)域的快速發(fā)展推動著金融行業(yè)的不斷創(chuàng)新，比如在移動支付、互聯(lián)網(wǎng)銷售、生物識別認(rèn)證、智能安全監(jiān)測、大數(shù)據(jù)分析授信、遠(yuǎn)程開戶等業(yè)務(wù)方面全面推進(jìn)，同時信息化系統(tǒng)中已不單單只是存儲著結(jié)構(gòu)化的信息數(shù)據(jù)，比如金融行業(yè)各自的APP、多媒體終端、電話銷售、銷售行為可回溯的雙錄等方面都存在著大量的音頻、視頻、圖片、地理位置等非結(jié)構(gòu)化的數(shù)據(jù)存儲需求。

業(yè)內(nèi)專家和權(quán)威第三方調(diào)查機構(gòu)普遍認(rèn)為，海量數(shù)據(jù)時代已經(jīng)到來。各類復(fù)雜數(shù)據(jù)中，85%以上是屬于廣泛用于信息網(wǎng)絡(luò)、物聯(lián)網(wǎng)、電子商務(wù)等場景中的非結(jié)構(gòu)化數(shù)據(jù)。由于非結(jié)構(gòu)化數(shù)據(jù)的特點，其數(shù)據(jù)量遠(yuǎn)遠(yuǎn)大于結(jié)構(gòu)化的文件，金融行業(yè)已經(jīng)面臨著數(shù)據(jù)存儲容量的大規(guī)模增長。許多企業(yè)用戶已經(jīng)意識到軟件定義分布式存儲技術(shù)的重要性，基于我們在存儲領(lǐng)域多年的實施和應(yīng)用經(jīng)驗，今天有幸和大家分享我積累的一些經(jīng)驗和見解。

元核云CEO 王凌云

元核云作為一家提供企業(yè)級軟件定義存儲的供應(yīng)商，從這幾年合作的客戶(單一客戶存儲數(shù)量超40PB)以及實際案例中歸納出時下海量數(shù)據(jù)存儲情況的幾個特征：

1、數(shù)據(jù)體量巨大：簡單來講就是數(shù)據(jù)存儲單位已經(jīng)從TB級發(fā)展為PB級;

2、數(shù)據(jù)類型繁多：比如用戶行為記錄、影像圖片、音頻、視頻、地理位置、文檔、日志等等;

3、商業(yè)價值高：數(shù)據(jù)收集后，進(jìn)行有效統(tǒng)計分析帶來的商業(yè)價值極高，數(shù)據(jù)已經(jīng)成為企業(yè)的核心競爭資產(chǎn);

4、處理速度快：對于海量的數(shù)據(jù)，金融企業(yè)往往要求處理數(shù)據(jù)的速度必須得快，更快挖掘數(shù)據(jù)價值才可以創(chuàng)造更好的企業(yè)價值。

面對以上海量數(shù)據(jù)存儲特征，傳統(tǒng)的信息化存儲方式也面臨著巨大的挑戰(zhàn)：

1、高可靠性：數(shù)據(jù)對于任何一個行業(yè)來說都是企業(yè)的核心資產(chǎn)，對于金融行業(yè)來說更是重中之重，一切的業(yè)務(wù)都建立在數(shù)據(jù)的基礎(chǔ)之上。當(dāng)數(shù)據(jù)最終存儲于硬件介質(zhì)中，硬件隨著使用的時長增加，將面臨著設(shè)備故障、電器老化、自然損耗等問題。海量數(shù)據(jù)背景下，存在數(shù)量眾多的存儲硬件設(shè)備，當(dāng)設(shè)備發(fā)生故障時，往往可能帶來數(shù)據(jù)的丟失或者需要長時間的數(shù)據(jù)恢復(fù)。這樣會給金融企業(yè)的業(yè)務(wù)開展帶來無法承擔(dān)的損失。

2、靈活可控性：從我們與金融公司合作的經(jīng)驗來講，隨著數(shù)據(jù)的快速增長，實現(xiàn)快速擴(kuò)容也成為滿足許多企業(yè)進(jìn)一步發(fā)展的必然條件。虛擬化技術(shù)的發(fā)展使得計算資源得以池化，使得業(yè)務(wù)系統(tǒng)所需要的計算資源能夠按需分配，彈性擴(kuò)展。同樣，企業(yè)也需要建立存儲的資源池，并能夠按需分配和動態(tài)增加存儲資源，滿足業(yè)務(wù)發(fā)展的需要。

3、高并發(fā)，低延遲的數(shù)據(jù)訪問方式：在海量數(shù)據(jù)的應(yīng)用場景下，對于數(shù)據(jù)的使用方式，企業(yè)提出了更高的要求。面對著高密度數(shù)據(jù)運算、互聯(lián)網(wǎng)用戶的高并發(fā)訪問、實時數(shù)據(jù)分析、機器學(xué)習(xí)等多種應(yīng)用場景，數(shù)據(jù)存儲系統(tǒng)必須要滿足更高并發(fā)的數(shù)據(jù)訪問，同時需要保證較低的響應(yīng)時效。簡單來說，即是需要更為高效的性能表現(xiàn)。而傳統(tǒng)的NAS、SAN存儲已經(jīng)有30多年的歷史，在其設(shè)計之初并非針對如此龐大數(shù)據(jù)量場景，因此會出現(xiàn)諸如文件索引緩存、服務(wù)器機頭等技術(shù)設(shè)計上的先天瓶頸。在海量數(shù)據(jù)存儲場景下，性能表現(xiàn)也會急劇下降。

4、數(shù)據(jù)使用方式變化：大規(guī)模海量數(shù)據(jù)應(yīng)用場景下，隨著數(shù)據(jù)的應(yīng)用方式多樣化，需要提供更細(xì)粒度的數(shù)據(jù)管理和使用方式，例如在近年來普遍提到的存儲即服務(wù)的思路，更推崇將數(shù)據(jù)存儲能力以服務(wù)的方式進(jìn)行暴露，比如：對象存儲服務(wù)方式。這一方式能有效地降低數(shù)據(jù)使用方對存儲系統(tǒng)的深度耦合性。

而傳統(tǒng)存儲仍然普遍通過塊設(shè)備或文件系統(tǒng)的方式提供存儲能力，這就大大的限制了數(shù)據(jù)存儲的使用場景。同時由于塊設(shè)備和文件系統(tǒng)需要大量的初始化動作和對于客戶端的要求，也增加了長期數(shù)據(jù)運維的成本。

相對于傳統(tǒng)存儲，新一代的軟件定義的分布式存儲理念已被提出多年。與我們合作的企業(yè)都遇到了數(shù)據(jù)量的大規(guī)模增長情況，而分布式存儲技術(shù)正好能符合這些企業(yè)對于當(dāng)下和未來大規(guī)模數(shù)據(jù)存儲的需求。

縱觀國際國內(nèi)技術(shù)發(fā)展趨勢，軟件定義的分布式存儲技術(shù)已經(jīng)成為越來越多金融企業(yè)IT管理者的選擇。

元核云正是專注于金融行業(yè)的軟件定義分布式存儲公司。其自主研發(fā)的元核云分布式存儲產(chǎn)品基于開源的Ceph軟件為架構(gòu)核心，企業(yè)客戶不用再擔(dān)心被閉源產(chǎn)品所綁架。同時，該產(chǎn)品在Ceph的基礎(chǔ)上進(jìn)行了深度優(yōu)化和完善。比如：我們在性能方面針對海量小文件場景、數(shù)據(jù)IO路徑、高速網(wǎng)絡(luò)、Crush算法進(jìn)行了優(yōu)化;在安全穩(wěn)定性方面設(shè)計了故障自動隔離、防數(shù)據(jù)靜默損毀的數(shù)據(jù)自動校驗、數(shù)據(jù)智能恢復(fù)等機制;在管理方面研發(fā)了全新的智能運維管理平臺，支持跨數(shù)據(jù)中心多集群的統(tǒng)一管理，輕松擴(kuò)容和規(guī)劃故障隔離域，監(jiān)控發(fā)現(xiàn)異常時郵件、短信、電話告警等運維功能。

目前元核云已經(jīng)幫助中國平安、中國人壽、華潤集團(tuán)、微眾銀行、招商金融等大型企業(yè)完成了分布式存儲技術(shù)的引入和轉(zhuǎn)型。擁有金融行業(yè)最大的Ceph存儲案例，支撐了千億級對象數(shù)據(jù)存儲和上萬個虛擬機運行，連續(xù)4年零故障穩(wěn)定運營記錄。

生成海報

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請進(jìn)一步核實，并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。