數(shù)據(jù)基礎設施的詠嘆調:華為給大數(shù)據(jù)時代一個智能擁抱

原標題:數(shù)據(jù)基礎設施的詠嘆調:華為給大數(shù)據(jù)時代一個智能擁抱

玩過《文明》這類城市模擬游戲,或者喜歡看工業(yè)主題小說的朋友會知道這樣一個概念:一座城市、一個地區(qū)想要發(fā)展起先進的工業(yè)文明,必須建立在足夠的基礎設施基礎上。

過去一百年的工業(yè)文明中,最重要的基礎設施往往是煤和鐵。所以國家和城市想要進入現(xiàn)代化,往往需要完善的煤鐵綜合體,工業(yè)理論上也有個說法叫做“煤鐵優(yōu)先”。從基礎建設到萬物萌生,這個過程看似枯燥,卻隱隱吻合著自然生態(tài)的法則與歌詠。

光陰流轉,當我們來到信息革命的深水區(qū)、智能時代的前夜,是否依舊有“先基礎設施,再到萬物發(fā)芽”這樣的邏輯呢?在云、數(shù)據(jù)和AI開始成為每一座城市、每一家企業(yè),甚至每個家庭的必備品時,我們仔細審視一下這些技術的發(fā)展邏輯,可能會發(fā)現(xiàn)像電氣化時代的“煤鐵”一樣,今天這個時間節(jié)點的基礎設施,是數(shù)據(jù)庫與存儲。

這個邏輯當然很容易理解,當我們發(fā)現(xiàn)數(shù)據(jù)就像水電石油一樣是生產必備能源的時候,只有足夠負載能力的數(shù)據(jù)庫和存儲系統(tǒng),才能讓數(shù)據(jù)這種新能源可以被切實儲備和調用。反過來,如果數(shù)據(jù)都存不住、調不出、查不到,那所有數(shù)據(jù)應用就都歸于妄談。

然而事實上,今天社會各行業(yè)普遍面臨著數(shù)據(jù)基建的挑戰(zhàn)。為迎接這些挑戰(zhàn),數(shù)據(jù)基礎設施的行業(yè)升級也在不斷前行當中。

5月15日,華為數(shù)據(jù)庫與存儲新產品發(fā)布會上,GaussDB分布式數(shù)據(jù)庫和FusionStorage 8.0分布式存儲系統(tǒng)都進行了重磅新品發(fā)布。而它們背后的內涵,是華為正在為數(shù)據(jù)基建的未來,送上一個智能化的擁抱。

智能時代,政企面前的數(shù)據(jù)渦旋

讓我們先來簡單回顧一個問題:為什么我們今天需要源源不斷地升級數(shù)據(jù)庫和產品?

最直接的原因在于,隨著云計算、大數(shù)據(jù)技術不斷發(fā)展,企業(yè)的數(shù)字化程度不斷升高,企業(yè)存儲和需要利用的數(shù)據(jù)普遍處在單向增加周期。久而久之,一個數(shù)據(jù)組成的渦旋開始逼近每一個政企組織。

無論是企業(yè)網(wǎng)還是在線業(yè)務,每天都在為企業(yè)生產大量的結構化數(shù)據(jù)。這些數(shù)據(jù)需要被妥善存儲,反復查詢、應用,并且不斷更新。由于結構化數(shù)據(jù)需要進行不斷關聯(lián),這讓越來越多的企業(yè)開始應用能夠不斷擴展規(guī)模的分布式數(shù)據(jù)庫與分布式存儲。在電商、金融、制造業(yè)等大型企業(yè)當中,對分布式數(shù)據(jù)庫和存儲的需求尤其明顯。

而伴隨著原有數(shù)據(jù)量的不斷增長,今天企業(yè)還在普遍開展網(wǎng)絡化、智能化新業(yè)務,這讓新產生的數(shù)據(jù)關系越來越復雜,讓數(shù)據(jù)存儲和調用的難度不斷增大。大規(guī)模結構化數(shù)據(jù)的存儲和調用,一方面考驗著數(shù)據(jù)庫和存儲系統(tǒng)的可靠性,另一方面也在不斷增加企業(yè)的數(shù)據(jù)運維成本,加大人工運維的難度挑戰(zhàn)。

總體而論,這個邏輯就是數(shù)據(jù)在不斷增加,數(shù)據(jù)間的關系在不斷復雜,政企用戶應用數(shù)據(jù)的需求在不斷深化。三者疊加,導致政企用戶,尤其是某些高數(shù)據(jù)復用型行業(yè),必須要擁抱“一大四高”型數(shù)據(jù)庫與存儲設備。

所謂一大四高,就是數(shù)據(jù)庫和存儲系統(tǒng)必須能夠支持大規(guī)模數(shù)據(jù),同時高可靠、高安全、高擴展及高性能。

在智能時代,大規(guī)模結構化數(shù)據(jù)的爆炸式增長,就像一條怒吼而來的江河。它既是企業(yè)賴以生存發(fā)展的寶貴資源,卻也可能弄巧成拙變成洪水。于是,擺在大量政企面前的數(shù)據(jù)渦旋,開始倒逼數(shù)據(jù)庫和存儲必須進化。在分布式、高擴展的基礎上,這二者開始了一場新的進化路徑:智能化。

我們似乎可以把華為剛剛發(fā)布的數(shù)據(jù)庫與存儲新產品,分別看作是兩只手臂。二者合圍,一個新的數(shù)據(jù)產業(yè)擁抱就此誕生。

左膀:GaussDB新品,繼續(xù)分布式數(shù)據(jù)庫的未來之旅

近幾年,數(shù)據(jù)庫領域的創(chuàng)新經歷了高速的發(fā)展,可供企業(yè)選擇的數(shù)據(jù)庫架構在不斷增多。而一般意義上而言,以金融行業(yè)為代表的、需要調用大規(guī)模結構化數(shù)據(jù),且對擴展和安全性有極高要求的行業(yè),正在普遍開始擁抱分布式數(shù)據(jù)庫。這一趨勢也在向越來越多的行業(yè)蔓延。

GaussDB,是華為創(chuàng)新領先的分布式數(shù)據(jù)庫產品。其最著名的特點,在于它是業(yè)界首款支持ARM的分布式數(shù)據(jù)庫。我們知道,近幾年ARM產業(yè)生態(tài)不斷發(fā)展,越來越多軟硬件選擇支持ARM處理器。對ARM芯片的兼容,已經悄然成為了數(shù)據(jù)庫產品的主要痛點之一。

而華為的GaussDB,利用ARM多核以及超并行計算技術,構筑了軟硬件全棧的數(shù)據(jù)庫能力,完善了ARM產業(yè)生態(tài)。另一方面,面對越來越復雜的數(shù)據(jù)庫調用需求和智能時代大量任務需要異構計算的現(xiàn)實,GaussDB還可以利用 AI芯片、GPU 、ARM、NPU等多種算力組合,讓數(shù)據(jù)庫獲得強大的異構計算能力。在權威標準測試集TPC-DS上,性能比業(yè)界提升50%,排名第一。

在此基礎之上,為什么說GaussDB是對智能時代的擁抱呢?原因在于其采用了華為獨創(chuàng)的AI-Native技術。這項技術的價值在于,華為將機器學習能力加入到了分布式數(shù)據(jù)庫的全生命周期當中。運用“自動駕駛網(wǎng)絡”,對數(shù)據(jù)庫進行具備主動學習和理解特征的自我調優(yōu)、自診斷自愈、自運維。

這個技術創(chuàng)新的核心價值,在于利用AI技術在多個層面的融入,解決了數(shù)據(jù)規(guī)模越來越大、結構越來越復雜之后,帶給用戶的運維難題。

當數(shù)據(jù)庫體量巨大之后,人工運維將是非常復雜,高消耗、低效率的一件事。而AI-Native的加入,則讓企業(yè)的運維成本呈現(xiàn)出指數(shù)級下降。

有數(shù)據(jù)顯示,在交易、分析和混合負載場景下,華為基于深度強化學習的自調優(yōu)算法,能夠調優(yōu)性能把業(yè)界平均提升60%以上。

這些產品的發(fā)布,極大豐富了GaussDB的產品形態(tài),應對了全行業(yè)日益復雜的數(shù)據(jù)庫產品需求。

右臂:FusionStorage 8.0帶來極致存儲體驗

在數(shù)據(jù)爆發(fā)的今天,越來越多政企用戶開始抵達集中式存儲的瓶頸。結構化數(shù)據(jù)的不斷延展,導致企業(yè)隨時需要擴展存儲空間,同時保證存儲延展的可靠性和兼容性。

另一方面,大數(shù)據(jù)的規(guī)模化應用和智能化的加深,也導致用戶開始需要高效率的存儲體驗,以確保存儲無損和高效存入調出。

為此,F(xiàn)usionStorage 8.0通過重定義存儲架構,為用戶帶來了存儲體驗的新高度。

首先在核心性能上,F(xiàn)usionStorage 8.0采用華為ARM-based處理器鯤鵬920加速,使IOPS提升了20%,結合華為AI Fabric無損網(wǎng)絡,時延降低了15%。其在SPC-1的性能測試中,單節(jié)點性能達到了16.8萬IOPS以及1ms以內時延,能夠適應企業(yè)核心業(yè)務存儲的需求。

存儲產品的另一個痛點,在于多類存儲之間存在不可兼容性。一旦企業(yè)數(shù)據(jù)復雜化增加,就會讓存儲成本和工作復雜性極大提高。為此,F(xiàn)usionStorage 8.0打破了架構壁壘,創(chuàng)新實現(xiàn)一套系統(tǒng)同時支持塊、文件、對象、HDFS 協(xié)議,也就是說1套存儲能夠支持4類主要存儲能力,讓用戶的多場景業(yè)務統(tǒng)一存儲成為可能。

而與GaussDB一樣,F(xiàn)usionStorage新產品同樣加持了華為在AI技術方面的智能化能力。FusionStorage 8.0版本,通過云上AI訓練和本地AI芯片的加持,將智能管理貫穿業(yè)務使用的全生命周期。

比如業(yè)務上線前對存儲資源進行智能規(guī)劃,使用過程中通過機器學習識別能力,對業(yè)務進行風險預判及故障定位等等,智能運維管理覆蓋業(yè)務全流程,從而得以整體性地大幅提升存儲效率。

高效能、跨結構和智能化,讓FusionStorage 8.0從多個維度開始追逐“極致存儲”的稱號。反過來看,我們可以發(fā)現(xiàn)華為存儲與數(shù)據(jù)庫產品挑戰(zhàn)新臺階的過程,事實上也代表著數(shù)據(jù)產品的發(fā)展趨勢:用智能能力,擁抱智能時代。

用智能能力擁抱數(shù)據(jù),用更好的數(shù)據(jù)產品擁抱智能時代

毫無疑問,未來是屬于智能時代的。AI為代表的智能技術將滲透入每一個企業(yè)與組織,在無數(shù)個角落生成生產力的進步。然而這個宏偉的時代,今天必須以數(shù)據(jù)產品的可靠、可用、安全為前提。

但是如何讓數(shù)據(jù)產品達到這些目標呢?在華為看來,這就需要智能技術的滲透,以及多種ICT技術的融合與突破創(chuàng)新。

從GaussDB和FusionStorage的發(fā)展軌跡來看,今天數(shù)據(jù)庫和存儲想要滿足新的產業(yè)需求,必須經歷三項面向智能時代的普遍升級。只有如此才能應對日益復雜的數(shù)據(jù)挑戰(zhàn),為產業(yè)用戶從多方面消解迎面而來的“數(shù)據(jù)高壓”。

1、數(shù)據(jù)洪流面前的百渠能力。大數(shù)據(jù)時代,分布式數(shù)據(jù)存儲成為主流。分布式數(shù)據(jù)結構,從本質上來說就是將洶涌而來的數(shù)據(jù)洪水,分散到千百水渠中。以疏代堵,分壓數(shù)據(jù)洪流。而這一過程中,需要數(shù)據(jù)極簡不斷進化抗壓能力、數(shù)據(jù)吞吐能力以及安全性能。而這需要考驗存儲、計算、網(wǎng)絡、AI等多個技術領域的積累和實力,利用技術協(xié)同優(yōu)勢打造數(shù)據(jù)產品的創(chuàng)新解決方案。比如在FusionStorage 8.0中,就集成了華為在計算、網(wǎng)絡和存儲多領域的芯片和算法積累。

2、智能落地,是減輕企業(yè)數(shù)據(jù)負擔的有效方式。在今天,數(shù)據(jù)的吞吐與儲存,正在變成一件異常復雜的工作。其中人力無法觸及的領域正在增加,而想要舒緩用戶在數(shù)據(jù)領域的成本,智能化就是必不可少的路徑。我們可以看到,智能化的自動駕駛網(wǎng)絡,正在從方方面面進入華為的ICT產品中。這條全新的賽道,正在決定數(shù)據(jù)基建在新產業(yè)周期中的成敗。

3、架構打通之路刻不容緩。數(shù)據(jù)領域的另一個命題,是異構計算和多類型存儲正在成為大量企業(yè)新的需求。而在智能化業(yè)務發(fā)展之際,這個需求只能是正向提升的。因此打通原本封閉的各計算與存儲架構,實現(xiàn)數(shù)據(jù)基礎設施的“一以貫之,化繁為簡”,也是這一領域的核心進化方向。

本著這三條路徑,華為在數(shù)據(jù)基建領域,用兩款智能化新產品作為手臂,給予數(shù)據(jù)產業(yè)以一個深情的擁抱。這個擁抱的含義或許在于,即使是最基本的數(shù)據(jù)基礎設施,在今天的產業(yè)革命面前,也可以是一首復雜精巧的詠嘆調:發(fā)現(xiàn)需求,克服障礙,勇敢創(chuàng)新,這些音符布滿其中,讓每一項技術創(chuàng)新都充滿韻味。

極客網(wǎng)企業(yè)會員

免責聲明:本網(wǎng)站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。

2019-05-15
數(shù)據(jù)基礎設施的詠嘆調:華為給大數(shù)據(jù)時代一個智能擁抱
在云、數(shù)據(jù)和AI開始成為每一座城市、每一家企業(yè),甚至每個家庭的必備品時,我們仔細審視一下這些技術的發(fā)展邏輯,可能會發(fā)現(xiàn)像電氣化時代的“煤鐵”一樣,今天這個時間節(jié)點的基礎設施,是數(shù)據(jù)庫與存儲。

長按掃碼 閱讀全文