全球大數(shù)據(jù)時代進行時,從2012年美國奧巴馬政府宣布了“大數(shù)據(jù)研發(fā)計劃”,到2015年我國國務院印發(fā)促進大數(shù)據(jù)發(fā)展行動綱要;從Google后Hadoop時代的“三駕馬車”Caffeine、Pregel、Dremel影響著全球大數(shù)據(jù)技術發(fā)展,到業(yè)內(nèi)普遍認為MPP與Hadoop形成混搭架構平臺是支撐大數(shù)據(jù)分析應用的最佳方案;從過去一年中國大數(shù)據(jù)市場已達到百億元的市場規(guī)模,到未來三年仍然保持著40%的高速增長率,大數(shù)據(jù)已然開辟出國家治理的新路徑,改變?nèi)藗兊纳罘绞剑l(fā)IT行業(yè)巨大的技術變革。回顧2015年,大數(shù)據(jù)基礎設施的重要性不言而喻,而數(shù)據(jù)庫作為基礎軟件核心,為大數(shù)據(jù)分析應用提供技術支撐,在大數(shù)據(jù)領域持續(xù)創(chuàng)造長期價值。
過去三十年數(shù)據(jù)庫的發(fā)展已經(jīng)形成了以Oracle、IBM、Microsoft等為代表的強勢壟斷格局。然而面對大數(shù)據(jù)引發(fā)的需求,傳統(tǒng)數(shù)據(jù)庫在處理百TB以上、特別是PB級數(shù)據(jù)的查詢、統(tǒng)計、分析等應用時,遇到性能上的瓶頸。世界數(shù)據(jù)庫格局在發(fā)生革命性的變化,通用數(shù)據(jù)庫OldSQL一統(tǒng)天下變成了OldSQL、NewSQL、NoSQL共同支撐多類應用的局面。國產(chǎn)數(shù)據(jù)庫廠商南大通用,已在項目中洞悉到用戶對多源異構海量規(guī)模數(shù)據(jù)的處理需求,預判到大數(shù)據(jù)的到來,早在2008年就啟動了分析型數(shù)據(jù)庫GBase 8a產(chǎn)品的設計與研發(fā)。恰逢曾擔任Oracle法國公司高級數(shù)據(jù)庫專家12年的武新博士回國發(fā)展事業(yè),出任南大通用CTO,由此肩負起GBase 8a總設計師的重任。GBase 8a誕生時起步早、起點高、累計投入研發(fā)資金超過2億元,作為專用架構的數(shù)據(jù)庫產(chǎn)品新品類,在大數(shù)據(jù)來臨之際憑借成熟的商用級水平搶占了市場先機。2015年是GBase 8a高速發(fā)展的一年,隨著南大通用CTO武新對GBase 8a過去一年的回顧,我們可以體會到與世界技術同步、市場同級的國產(chǎn)新型數(shù)據(jù)庫歷經(jīng)了怎樣不平凡之路。
從未止步的產(chǎn)品優(yōu)化與技術突破
GBase 8a從2010年4月1日發(fā)布第一個單機版,產(chǎn)品歷時8年精進演變,不斷進行新技術突破和產(chǎn)品優(yōu)化。武新總結到GBase 8a在2015年主要發(fā)布了三個大的版本,與產(chǎn)品自身相比,v8.5.11.4更加增強可靠性;v8.5.11.5的性能相比上一版本提升了一倍;v8.6從MPP架構變遷為聯(lián)邦架構,實現(xiàn)了“追加寫”的在線擴容,批量“寫”的性能提升1倍,單個集群支持數(shù)量從192節(jié)點提升至300節(jié)點。產(chǎn)品取得這樣的成果背后,是1000+人月的研發(fā)投入,13類新功能的豐富,65萬行新代碼的編寫,超過400份4800頁文檔的輸出。這些數(shù)字在武新看來,正是南大通用人為GBase 8a獲得用戶認可而作出的扎實基本功課。
國產(chǎn)數(shù)據(jù)庫在向著關鍵行業(yè)核心應用的道路上破冰前行,數(shù)據(jù)庫的質(zhì)量是關鍵。武新進一步介紹到南大通用在使用傳統(tǒng)人工測試,積累了上萬例測試用例的基礎上,打造出國內(nèi)領先的數(shù)據(jù)庫自動化測試平臺,通過自動化的方式對GBase 8a進行覆蓋性測試。自動化測試平臺可以自動生成海量用例模擬用戶的全部輸入和全部可能出現(xiàn)的場景,從而實現(xiàn)對產(chǎn)品無死角的全方位覆蓋測試?;趪栏窀咝Ы∪臏y試體系,GBase 8a更是具備快速迭代的能力,最快可實現(xiàn)3天發(fā)版,真正做到快速響應一線用戶的需求。
混搭架構共同支撐大數(shù)據(jù)應用
GBase 8a的集群形態(tài)是基于MPP技術架構的。提及MPP與Hadoop在處理大數(shù)據(jù)時的關系,武新解答了大數(shù)據(jù)時代初期普遍存在的認知誤區(qū)。Hadoop并非是解決大數(shù)據(jù)分析的唯一技術方案。武新對行業(yè)環(huán)境的變化深有體會,他講到南大通用至少在三年前就開始提出行業(yè)大數(shù)據(jù)的概念,大數(shù)據(jù)并非只是互聯(lián)網(wǎng)的產(chǎn)物,行業(yè)大數(shù)據(jù)的應用并不比互聯(lián)網(wǎng)少。當前業(yè)界主流的思路是,MPP存儲高價值密度數(shù)據(jù),用于進行數(shù)據(jù)分析和挖掘;Hadoop存儲低價值密度數(shù)據(jù),用于基礎數(shù)據(jù)存儲、數(shù)據(jù)清洗和簡單分類查詢。國際廠商已經(jīng)推出了這種融合架構的平臺化產(chǎn)品,如EMC的Pivotal、HP的HAVEn。GBase 8a MPP集群已在金融、電信等眾多高端行業(yè)的應用中與Hadoop產(chǎn)品混搭部署、相互融合,形成了支撐大數(shù)據(jù)應用的整體解決方案。南大通用也推出了融合架構的大數(shù)據(jù)統(tǒng)一處理平臺產(chǎn)品GBase UP,即Unified Platform。武新肯定的表示,南大通用在數(shù)據(jù)庫研究的領先性上,已經(jīng)實現(xiàn)了與國際主流廠商技術同步、市場同級的目標。
優(yōu)異的市場表現(xiàn)離不開用戶的信任支持
說起市場表現(xiàn),武新介紹:目前,GBase 8a已經(jīng)成功進入電信、銀行、保險、電力、公安、安全、海關、稅務、社保、財政、衛(wèi)計、食藥監(jiān)、統(tǒng)計、海洋、軍工等行業(yè),其中在電信行業(yè)成功覆蓋三大運營商16個省份。GBase 8a市場份額在新一代MPP中占據(jù)第一。作為軟件產(chǎn)品,其產(chǎn)品質(zhì)量要在不斷的應用部署中走向成熟,GBase 8a的快速成長同樣也離不開用戶的信任與支持,可以說軍功章有南大通用的一半也有用戶的一半。說到此處武新又興奮地舉了個實例,中國農(nóng)業(yè)銀行使用GBase 8a替換國外產(chǎn)品Sybase,突破了擴展能力瓶頸。數(shù)據(jù)處理能力提升了100倍,數(shù)據(jù)處理級別也從TB提升到PB。通過引進大數(shù)據(jù)處理技術,農(nóng)行歷史上第一次有了總行級別的數(shù)據(jù)倉庫,經(jīng)營視野也從分行級別擴展至全行,并成為四大國有銀行中首家在金融核心系統(tǒng)中完成國產(chǎn)化替代,實現(xiàn)國產(chǎn)金融大數(shù)據(jù)平臺方案成功落地的銀行。而GBase 8a在農(nóng)行項目中也不斷進步,完成了多次質(zhì)的飛躍,目前在建項目完成后集群總規(guī)模將達到400節(jié)點以上。GBase 8a從該項目上線至今,系統(tǒng)每天處理6000個以上的復雜作業(yè),每天數(shù)據(jù)處理增量超過2TB,系統(tǒng)最大的表已超過1000億行,每天增量10億條。武新由衷地表示,僅以這幾個數(shù)據(jù)為例就可以看出GBase 8a已成為真正令人自豪的世界級數(shù)據(jù)庫!
在對數(shù)據(jù)庫要求甚高的電信行業(yè),GBase 8a擊敗了眾多對手,成為唯一通過中國移動集團“集中經(jīng)分”POC測試的國產(chǎn)MPP數(shù)據(jù)庫,其他通過測試的國外產(chǎn)品僅有Greenplum、Vertica。武新簡要描述了一下中移動集中經(jīng)分測試規(guī)模:120個計算節(jié)點、30個加載節(jié)點,800TB裸數(shù)據(jù),最大表36000億行數(shù)據(jù),最小表8億行數(shù)據(jù)。他表示就是這樣的高難度動作,GBase 8a也能完成得相當漂亮,并入圍三甲。2015年GBase 8a在證監(jiān)、人社、海關、電信等四大行業(yè)31個項目POC測試中擊敗國外競爭對手,獲得業(yè)內(nèi)良好口碑,同時也終結了國產(chǎn)數(shù)據(jù)庫無法支撐行業(yè)核心業(yè)務系統(tǒng)的時代,讓用戶有了更多的選擇。
僅2015年,GBase 8a就實現(xiàn)了在中國聯(lián)通、中國電信、銀監(jiān)會、公安部、國稅總局、海關總署等重點行業(yè)用戶的大數(shù)據(jù)處理平臺中提供支撐,項目累計上線1019個節(jié)點,數(shù)據(jù)處理總量超過5PB。武新自豪地表示,這些數(shù)據(jù)力證GBase 8a與國外產(chǎn)品在技術上已經(jīng)達到同步,甚至在支持數(shù)據(jù)規(guī)模和系統(tǒng)并發(fā)能力上已局部領先。
志在摘取大數(shù)據(jù)基礎軟件設施中的明珠
數(shù)據(jù)如能源,數(shù)據(jù)安全是關鍵,支撐大數(shù)據(jù)存儲和計算的數(shù)據(jù)庫是大數(shù)據(jù)基礎軟件設施中的“明珠”,南大通用志在摘取這顆明珠。今年南大通用成為第一家掛牌新三板,進入資本市場的國產(chǎn)數(shù)據(jù)庫廠商,南大通用將繼續(xù)加大產(chǎn)品研發(fā)、產(chǎn)品測試、應用遷移、適配優(yōu)化等方面的成本投入,專注力量發(fā)展數(shù)據(jù)庫業(yè)務,志在通過不懈努力摘取大數(shù)據(jù)基礎軟件設施中的“明珠”。談起與國際數(shù)據(jù)庫的競爭形勢時武新說,在大數(shù)據(jù)分析領域,GBase 8a已經(jīng)戰(zhàn)勝Oracle、IBM、微軟等老牌數(shù)據(jù)庫巨頭,并在與HP、EMC等數(shù)據(jù)庫新貴的PK中屢屢獲勝,讓業(yè)界重新燃起了對國產(chǎn)數(shù)據(jù)庫的希望,也讓南大通用人為之驕傲和自豪。
產(chǎn)品、服務、合作蓄勢發(fā)力
展望2016年的發(fā)展規(guī)劃,武新表示將繼續(xù)聚焦在產(chǎn)品、服務、合作模式上發(fā)力。他將帶領研發(fā)團隊攻關GBase 8a虛擬集群這一新的產(chǎn)品應用形態(tài)。GBase 8a虛擬集群能夠進行分層管理,支持跨數(shù)據(jù)中心的部署,多數(shù)據(jù)中心分層進行管理,各數(shù)據(jù)中心按照需求及規(guī)模創(chuàng)建獨立的子集群。面對超大規(guī)模集群的元數(shù)據(jù)管理、通訊模型、跨異構集群的訪問等關鍵技術帶來的挑戰(zhàn),南大通用人已做好了封閉攻關的準備,為早日攻下1000節(jié)點的超大規(guī)模集群目標而奮斗。GBase 8a之所以能在金融、電信、政務等高端行業(yè)項目中頻傳捷報,除了可與國際主流數(shù)據(jù)庫比肩的產(chǎn)品以外,優(yōu)質(zhì)的配套服務也是關鍵。武新談到,南大通用將進一步擴大技術支持服務隊伍,加固已經(jīng)形成的三橫三縱一環(huán)的技術體系,持續(xù)高效響應用戶需求,以解決方案為依托,加強產(chǎn)品價值營銷。GBase 8a需要在健全的生態(tài)環(huán)境中發(fā)展壯大,并且離不開合作伙伴的助力。南大通用拓展公司新業(yè)務模式,已與東華軟件、華三通信、方正等公司形成深度合作,其中不乏趨近千萬規(guī)模的合作形式。
匯聚人才、技術、產(chǎn)業(yè)發(fā)展的力量,南大通用人將繼續(xù)秉承匠心精神,精益打磨GBase 8a這顆大數(shù)據(jù)基礎軟件設施中的“明珠”,支撐國家大數(shù)據(jù)戰(zhàn)略落地,為用戶提供多一種高端產(chǎn)品選擇,推動國內(nèi)大數(shù)據(jù)產(chǎn)業(yè)向前發(fā)展。
- 蜜度索驥:以跨模態(tài)檢索技術助力“企宣”向上生長
- 為什么年輕人不愛換手機了
- 柔宇科技未履行金額近億元被曝已6個月發(fā)不出工資
- 柔宇科技被曝已6個月發(fā)不出工資 公司回應欠薪有補償方案
- 第六座“綠動未來”環(huán)保公益圖書館落地貴州山區(qū)小學
- 窺見“新紀元”,2021元宇宙產(chǎn)業(yè)發(fā)展高峰論壇“廣州啟幕”
- 以人為本,景悅科技解讀智慧城市發(fā)展新理念
- 紐迪瑞科技/NDT賦能黑鯊4 Pro游戲手機打造全新一代屏幕壓感
- 清潔家電新老玩家市場定位清晰,攜手共進,核心技術決定未來
- 新思科技與芯耀輝在IP產(chǎn)品領域達成戰(zhàn)略合作伙伴關系
- 芯耀輝加速全球化部署,任命原Intel高管出任全球總裁
免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內(nèi)容或斷開相關鏈接。