南大通用：志在大數(shù)據(jù)基礎(chǔ)軟件設(shè)施中的“明珠”

全球大數(shù)據(jù)時代進行時，從2012年美國奧巴馬政府宣布了“大數(shù)據(jù)研發(fā)計劃”，到2015年我國國務(wù)院印發(fā)促進大數(shù)據(jù)發(fā)展行動綱要；從Google后Hadoop時代的“三駕馬車”Caffeine、Pregel、Dremel影響著全球大數(shù)據(jù)技術(shù)發(fā)展，到業(yè)內(nèi)普遍認(rèn)為MPP與Hadoop形成混搭架構(gòu)平臺是支撐大數(shù)據(jù)分析應(yīng)用的最佳方案；從過去一年中國大數(shù)據(jù)市場已達(dá)到百億元的市場規(guī)模，到未來三年仍然保持著40%的高速增長率，大數(shù)據(jù)已然開辟出國家治理的新路徑，改變?nèi)藗兊纳罘绞?，引發(fā)IT行業(yè)巨大的技術(shù)變革?；仡?015年，大數(shù)據(jù)基礎(chǔ)設(shè)施的重要性不言而喻，而數(shù)據(jù)庫作為基礎(chǔ)軟件核心，為大數(shù)據(jù)分析應(yīng)用提供技術(shù)支撐，在大數(shù)據(jù)領(lǐng)域持續(xù)創(chuàng)造長期價值。

過去三十年數(shù)據(jù)庫的發(fā)展已經(jīng)形成了以O(shè)racle、IBM、Microsoft等為代表的強勢壟斷格局。然而面對大數(shù)據(jù)引發(fā)的需求，傳統(tǒng)數(shù)據(jù)庫在處理百TB以上、特別是PB級數(shù)據(jù)的查詢、統(tǒng)計、分析等應(yīng)用時，遇到性能上的瓶頸。世界數(shù)據(jù)庫格局在發(fā)生革命性的變化，通用數(shù)據(jù)庫OldSQL一統(tǒng)天下變成了OldSQL、NewSQL、NoSQL共同支撐多類應(yīng)用的局面。國產(chǎn)數(shù)據(jù)庫廠商南大通用，已在項目中洞悉到用戶對多源異構(gòu)海量規(guī)模數(shù)據(jù)的處理需求，預(yù)判到大數(shù)據(jù)的到來，早在2008年就啟動了分析型數(shù)據(jù)庫GBase 8a產(chǎn)品的設(shè)計與研發(fā)。恰逢曾擔(dān)任Oracle法國公司高級數(shù)據(jù)庫專家12年的武新博士回國發(fā)展事業(yè)，出任南大通用CTO，由此肩負(fù)起GBase 8a總設(shè)計師的重任。GBase 8a誕生時起步早、起點高、累計投入研發(fā)資金超過2億元，作為專用架構(gòu)的數(shù)據(jù)庫產(chǎn)品新品類，在大數(shù)據(jù)來臨之際憑借成熟的商用級水平搶占了市場先機。2015年是GBase 8a高速發(fā)展的一年，隨著南大通用CTO武新對GBase 8a過去一年的回顧，我們可以體會到與世界技術(shù)同步、市場同級的國產(chǎn)新型數(shù)據(jù)庫歷經(jīng)了怎樣不平凡之路。

從未止步的產(chǎn)品優(yōu)化與技術(shù)突破

GBase 8a從2010年4月1日發(fā)布第一個單機版，產(chǎn)品歷時8年精進演變，不斷進行新技術(shù)突破和產(chǎn)品優(yōu)化。武新總結(jié)到GBase 8a在2015年主要發(fā)布了三個大的版本，與產(chǎn)品自身相比，v8.5.11.4更加增強可靠性；v8.5.11.5的性能相比上一版本提升了一倍；v8.6從MPP架構(gòu)變遷為聯(lián)邦架構(gòu)，實現(xiàn)了“追加寫”的在線擴容，批量“寫”的性能提升1倍，單個集群支持?jǐn)?shù)量從192節(jié)點提升至300節(jié)點。產(chǎn)品取得這樣的成果背后，是1000+人月的研發(fā)投入，13類新功能的豐富，65萬行新代碼的編寫，超過400份4800頁文檔的輸出。這些數(shù)字在武新看來，正是南大通用人為GBase 8a獲得用戶認(rèn)可而作出的扎實基本功課。

國產(chǎn)數(shù)據(jù)庫在向著關(guān)鍵行業(yè)核心應(yīng)用的道路上破冰前行，數(shù)據(jù)庫的質(zhì)量是關(guān)鍵。武新進一步介紹到南大通用在使用傳統(tǒng)人工測試，積累了上萬例測試用例的基礎(chǔ)上，打造出國內(nèi)領(lǐng)先的數(shù)據(jù)庫自動化測試平臺，通過自動化的方式對GBase 8a進行覆蓋性測試。自動化測試平臺可以自動生成海量用例模擬用戶的全部輸入和全部可能出現(xiàn)的場景，從而實現(xiàn)對產(chǎn)品無死角的全方位覆蓋測試?；趪?yán)格高效健全的測試體系，GBase 8a更是具備快速迭代的能力，最快可實現(xiàn)3天發(fā)版，真正做到快速響應(yīng)一線用戶的需求。

混搭架構(gòu)共同支撐大數(shù)據(jù)應(yīng)用

GBase 8a的集群形態(tài)是基于MPP技術(shù)架構(gòu)的。提及MPP與Hadoop在處理大數(shù)據(jù)時的關(guān)系，武新解答了大數(shù)據(jù)時代初期普遍存在的認(rèn)知誤區(qū)。Hadoop并非是解決大數(shù)據(jù)分析的唯一技術(shù)方案。武新對行業(yè)環(huán)境的變化深有體會，他講到南大通用至少在三年前就開始提出行業(yè)大數(shù)據(jù)的概念，大數(shù)據(jù)并非只是互聯(lián)網(wǎng)的產(chǎn)物，行業(yè)大數(shù)據(jù)的應(yīng)用并不比互聯(lián)網(wǎng)少。當(dāng)前業(yè)界主流的思路是，MPP存儲高價值密度數(shù)據(jù)，用于進行數(shù)據(jù)分析和挖掘；Hadoop存儲低價值密度數(shù)據(jù)，用于基礎(chǔ)數(shù)據(jù)存儲、數(shù)據(jù)清洗和簡單分類查詢。國際廠商已經(jīng)推出了這種融合架構(gòu)的平臺化產(chǎn)品，如EMC的Pivotal、HP的HAVEn。GBase 8a MPP集群已在金融、電信等眾多高端行業(yè)的應(yīng)用中與Hadoop產(chǎn)品混搭部署、相互融合，形成了支撐大數(shù)據(jù)應(yīng)用的整體解決方案。南大通用也推出了融合架構(gòu)的大數(shù)據(jù)統(tǒng)一處理平臺產(chǎn)品GBase UP，即Unified Platform。武新肯定的表示，南大通用在數(shù)據(jù)庫研究的領(lǐng)先性上，已經(jīng)實現(xiàn)了與國際主流廠商技術(shù)同步、市場同級的目標(biāo)。

優(yōu)異的市場表現(xiàn)離不開用戶的信任支持

說起市場表現(xiàn)，武新介紹：目前，GBase 8a已經(jīng)成功進入電信、銀行、保險、電力、公安、安全、海關(guān)、稅務(wù)、社保、財政、衛(wèi)計、食藥監(jiān)、統(tǒng)計、海洋、軍工等行業(yè)，其中在電信行業(yè)成功覆蓋三大運營商16個省份。GBase 8a市場份額在新一代MPP中占據(jù)第一。作為軟件產(chǎn)品，其產(chǎn)品質(zhì)量要在不斷的應(yīng)用部署中走向成熟，GBase 8a的快速成長同樣也離不開用戶的信任與支持，可以說軍功章有南大通用的一半也有用戶的一半。說到此處武新又興奮地舉了個實例，中國農(nóng)業(yè)銀行使用GBase 8a替換國外產(chǎn)品Sybase，突破了擴展能力瓶頸。數(shù)據(jù)處理能力提升了100倍，數(shù)據(jù)處理級別也從TB提升到PB。通過引進大數(shù)據(jù)處理技術(shù)，農(nóng)行歷史上第一次有了總行級別的數(shù)據(jù)倉庫，經(jīng)營視野也從分行級別擴展至全行，并成為四大國有銀行中首家在金融核心系統(tǒng)中完成國產(chǎn)化替代，實現(xiàn)國產(chǎn)金融大數(shù)據(jù)平臺方案成功落地的銀行。而GBase 8a在農(nóng)行項目中也不斷進步，完成了多次質(zhì)的飛躍，目前在建項目完成后集群總規(guī)模將達(dá)到400節(jié)點以上。GBase 8a從該項目上線至今，系統(tǒng)每天處理6000個以上的復(fù)雜作業(yè)，每天數(shù)據(jù)處理增量超過2TB，系統(tǒng)最大的表已超過1000億行，每天增量10億條。武新由衷地表示，僅以這幾個數(shù)據(jù)為例就可以看出GBase 8a已成為真正令人自豪的世界級數(shù)據(jù)庫！

在對數(shù)據(jù)庫要求甚高的電信行業(yè)，GBase 8a擊敗了眾多對手，成為唯一通過中國移動集團“集中經(jīng)分”POC測試的國產(chǎn)MPP數(shù)據(jù)庫，其他通過測試的國外產(chǎn)品僅有Greenplum、Vertica。武新簡要描述了一下中移動集中經(jīng)分測試規(guī)模：120個計算節(jié)點、30個加載節(jié)點，800TB裸數(shù)據(jù)，最大表36000億行數(shù)據(jù)，最小表8億行數(shù)據(jù)。他表示就是這樣的高難度動作，GBase 8a也能完成得相當(dāng)漂亮，并入圍三甲。2015年GBase 8a在證監(jiān)、人社、海關(guān)、電信等四大行業(yè)31個項目POC測試中擊敗國外競爭對手，獲得業(yè)內(nèi)良好口碑，同時也終結(jié)了國產(chǎn)數(shù)據(jù)庫無法支撐行業(yè)核心業(yè)務(wù)系統(tǒng)的時代，讓用戶有了更多的選擇。

僅2015年，GBase 8a就實現(xiàn)了在中國聯(lián)通、中國電信、銀監(jiān)會、公安部、國稅總局、海關(guān)總署等重點行業(yè)用戶的大數(shù)據(jù)處理平臺中提供支撐，項目累計上線1019個節(jié)點，數(shù)據(jù)處理總量超過5PB。武新自豪地表示，這些數(shù)據(jù)力證GBase 8a與國外產(chǎn)品在技術(shù)上已經(jīng)達(dá)到同步，甚至在支持?jǐn)?shù)據(jù)規(guī)模和系統(tǒng)并發(fā)能力上已局部領(lǐng)先。

志在摘取大數(shù)據(jù)基礎(chǔ)軟件設(shè)施中的明珠

數(shù)據(jù)如能源，數(shù)據(jù)安全是關(guān)鍵，支撐大數(shù)據(jù)存儲和計算的數(shù)據(jù)庫是大數(shù)據(jù)基礎(chǔ)軟件設(shè)施中的“明珠”，南大通用志在摘取這顆明珠。今年南大通用成為第一家掛牌新三板，進入資本市場的國產(chǎn)數(shù)據(jù)庫廠商，南大通用將繼續(xù)加大產(chǎn)品研發(fā)、產(chǎn)品測試、應(yīng)用遷移、適配優(yōu)化等方面的成本投入，專注力量發(fā)展數(shù)據(jù)庫業(yè)務(wù)，志在通過不懈努力摘取大數(shù)據(jù)基礎(chǔ)軟件設(shè)施中的“明珠”。談起與國際數(shù)據(jù)庫的競爭形勢時武新說，在大數(shù)據(jù)分析領(lǐng)域，GBase 8a已經(jīng)戰(zhàn)勝Oracle、IBM、微軟等老牌數(shù)據(jù)庫巨頭，并在與HP、EMC等數(shù)據(jù)庫新貴的PK中屢屢獲勝，讓業(yè)界重新燃起了對國產(chǎn)數(shù)據(jù)庫的希望，也讓南大通用人為之驕傲和自豪。

產(chǎn)品、服務(wù)、合作蓄勢發(fā)力

展望2016年的發(fā)展規(guī)劃，武新表示將繼續(xù)聚焦在產(chǎn)品、服務(wù)、合作模式上發(fā)力。他將帶領(lǐng)研發(fā)團隊攻關(guān)GBase 8a虛擬集群這一新的產(chǎn)品應(yīng)用形態(tài)。GBase 8a虛擬集群能夠進行分層管理，支持跨數(shù)據(jù)中心的部署，多數(shù)據(jù)中心分層進行管理，各數(shù)據(jù)中心按照需求及規(guī)模創(chuàng)建獨立的子集群。面對超大規(guī)模集群的元數(shù)據(jù)管理、通訊模型、跨異構(gòu)集群的訪問等關(guān)鍵技術(shù)帶來的挑戰(zhàn)，南大通用人已做好了封閉攻關(guān)的準(zhǔn)備，為早日攻下1000節(jié)點的超大規(guī)模集群目標(biāo)而奮斗。GBase 8a之所以能在金融、電信、政務(wù)等高端行業(yè)項目中頻傳捷報，除了可與國際主流數(shù)據(jù)庫比肩的產(chǎn)品以外，優(yōu)質(zhì)的配套服務(wù)也是關(guān)鍵。武新談到，南大通用將進一步擴大技術(shù)支持服務(wù)隊伍，加固已經(jīng)形成的三橫三縱一環(huán)的技術(shù)體系，持續(xù)高效響應(yīng)用戶需求，以解決方案為依托，加強產(chǎn)品價值營銷。GBase 8a需要在健全的生態(tài)環(huán)境中發(fā)展壯大，并且離不開合作伙伴的助力。南大通用拓展公司新業(yè)務(wù)模式，已與東華軟件、華三通信、方正等公司形成深度合作，其中不乏趨近千萬規(guī)模的合作形式。

匯聚人才、技術(shù)、產(chǎn)業(yè)發(fā)展的力量，南大通用人將繼續(xù)秉承匠心精神，精益打磨GBase 8a這顆大數(shù)據(jù)基礎(chǔ)軟件設(shè)施中的“明珠”，支撐國家大數(shù)據(jù)戰(zhàn)略落地，為用戶提供多一種高端產(chǎn)品選擇，推動國內(nèi)大數(shù)據(jù)產(chǎn)業(yè)向前發(fā)展。

生成海報

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。