數(shù)據(jù)基礎(chǔ)設(shè)施的詠嘆調(diào):華為給大數(shù)據(jù)時代一個智能擁抱

玩過《文明》這類城市模擬游戲,或者喜歡看工業(yè)主題小說的朋友會知道這樣一個概念:一座城市、一個地區(qū)想要發(fā)展起先進(jìn)的工業(yè)文明,必須建立在足夠的基礎(chǔ)設(shè)施基礎(chǔ)上。

過去一百年的工業(yè)文明中,最重要的基礎(chǔ)設(shè)施往往是煤和鐵。所以國家和城市想要進(jìn)入現(xiàn)代化,往往需要完善的煤鐵綜合體,工業(yè)理論上也有個說法叫做“煤鐵優(yōu)先”。從基礎(chǔ)建設(shè)到萬物萌生,這個過程看似枯燥,卻隱隱吻合著自然生態(tài)的法則與歌詠。

光陰流轉(zhuǎn),當(dāng)我們來到信息革命的深水區(qū)、智能時代的前夜,是否依舊有“先基礎(chǔ)設(shè)施,再到萬物發(fā)芽”這樣的邏輯呢?在云、數(shù)據(jù)和AI開始成為每一座城市、每一家企業(yè),甚至每個家庭的必備品時,我們仔細(xì)審視一下這些技術(shù)的發(fā)展邏輯,可能會發(fā)現(xiàn)像電氣化時代的“煤鐵”一樣,今天這個時間節(jié)點(diǎn)的基礎(chǔ)設(shè)施,是數(shù)據(jù)庫與存儲。

這個邏輯當(dāng)然很容易理解,當(dāng)我們發(fā)現(xiàn)數(shù)據(jù)就像水電石油一樣是生產(chǎn)必備能源的時候,只有足夠負(fù)載能力的數(shù)據(jù)庫和存儲系統(tǒng),才能讓數(shù)據(jù)這種新能源可以被切實(shí)儲備和調(diào)用。反過來,如果數(shù)據(jù)都存不住、調(diào)不出、查不到,那所有數(shù)據(jù)應(yīng)用就都?xì)w于妄談。

然而事實(shí)上,今天社會各行業(yè)普遍面臨著數(shù)據(jù)基建的挑戰(zhàn)。為迎接這些挑戰(zhàn),數(shù)據(jù)基礎(chǔ)設(shè)施的行業(yè)升級也在不斷前行當(dāng)中。

5月15日,華為數(shù)據(jù)庫與存儲新產(chǎn)品發(fā)布會上,GaussDB分布式數(shù)據(jù)庫和FusionStorage 8.0分布式存儲系統(tǒng)都進(jìn)行了重磅新品發(fā)布。而它們背后的內(nèi)涵,是華為正在為數(shù)據(jù)基建的未來,送上一個智能化的擁抱。

智能時代,政企面前的數(shù)據(jù)渦旋

讓我們先來簡單回顧一個問題:為什么我們今天需要源源不斷地升級數(shù)據(jù)庫和產(chǎn)品?

最直接的原因在于,隨著云計算、大數(shù)據(jù)技術(shù)不斷發(fā)展,企業(yè)的數(shù)字化程度不斷升高,企業(yè)存儲和需要利用的數(shù)據(jù)普遍處在單向增加周期。久而久之,一個數(shù)據(jù)組成的渦旋開始逼近每一個政企組織。

無論是企業(yè)網(wǎng)還是在線業(yè)務(wù),每天都在為企業(yè)生產(chǎn)大量的結(jié)構(gòu)化數(shù)據(jù)。這些數(shù)據(jù)需要被妥善存儲,反復(fù)查詢、應(yīng)用,并且不斷更新。由于結(jié)構(gòu)化數(shù)據(jù)需要進(jìn)行不斷關(guān)聯(lián),這讓越來越多的企業(yè)開始應(yīng)用能夠不斷擴(kuò)展規(guī)模的分布式數(shù)據(jù)庫與分布式存儲。在電商、金融、制造業(yè)等大型企業(yè)當(dāng)中,對分布式數(shù)據(jù)庫和存儲的需求尤其明顯。

而伴隨著原有數(shù)據(jù)量的不斷增長,今天企業(yè)還在普遍開展網(wǎng)絡(luò)化、智能化新業(yè)務(wù),這讓新產(chǎn)生的數(shù)據(jù)關(guān)系越來越復(fù)雜,讓數(shù)據(jù)存儲和調(diào)用的難度不斷增大。大規(guī)模結(jié)構(gòu)化數(shù)據(jù)的存儲和調(diào)用,一方面考驗(yàn)著數(shù)據(jù)庫和存儲系統(tǒng)的可靠性,另一方面也在不斷增加企業(yè)的數(shù)據(jù)運(yùn)維成本,加大人工運(yùn)維的難度挑戰(zhàn)。

總體而論,這個邏輯就是數(shù)據(jù)在不斷增加,數(shù)據(jù)間的關(guān)系在不斷復(fù)雜,政企用戶應(yīng)用數(shù)據(jù)的需求在不斷深化。三者疊加,導(dǎo)致政企用戶,尤其是某些高數(shù)據(jù)復(fù)用型行業(yè),必須要擁抱“一大四高”型數(shù)據(jù)庫與存儲設(shè)備。

所謂一大四高,就是數(shù)據(jù)庫和存儲系統(tǒng)必須能夠支持大規(guī)模數(shù)據(jù),同時高可靠、高安全、高擴(kuò)展及高性能。

在智能時代,大規(guī)模結(jié)構(gòu)化數(shù)據(jù)的爆炸式增長,就像一條怒吼而來的江河。它既是企業(yè)賴以生存發(fā)展的寶貴資源,卻也可能弄巧成拙變成洪水。于是,擺在大量政企面前的數(shù)據(jù)渦旋,開始倒逼數(shù)據(jù)庫和存儲必須進(jìn)化。在分布式、高擴(kuò)展的基礎(chǔ)上,這二者開始了一場新的進(jìn)化路徑:智能化。

我們似乎可以把華為剛剛發(fā)布的數(shù)據(jù)庫與存儲新產(chǎn)品,分別看作是兩只手臂。二者合圍,一個新的數(shù)據(jù)產(chǎn)業(yè)擁抱就此誕生。

左膀:GaussDB新品,繼續(xù)分布式數(shù)據(jù)庫的未來之旅

近幾年,數(shù)據(jù)庫領(lǐng)域的創(chuàng)新經(jīng)歷了高速的發(fā)展,可供企業(yè)選擇的數(shù)據(jù)庫架構(gòu)在不斷增多。而一般意義上而言,以金融行業(yè)為代表的、需要調(diào)用大規(guī)模結(jié)構(gòu)化數(shù)據(jù),且對擴(kuò)展和安全性有極高要求的行業(yè),正在普遍開始擁抱分布式數(shù)據(jù)庫。這一趨勢也在向越來越多的行業(yè)蔓延。

GaussDB,是華為創(chuàng)新領(lǐng)先的分布式數(shù)據(jù)庫產(chǎn)品。其最著名的特點(diǎn),在于它是業(yè)界首款支持ARM的分布式數(shù)據(jù)庫。我們知道,近幾年ARM產(chǎn)業(yè)生態(tài)不斷發(fā)展,越來越多軟硬件選擇支持ARM處理器。對ARM芯片的兼容,已經(jīng)悄然成為了數(shù)據(jù)庫產(chǎn)品的主要痛點(diǎn)之一。

而華為的GaussDB,利用ARM多核以及超并行計算技術(shù),構(gòu)筑了軟硬件全棧的數(shù)據(jù)庫能力,完善了ARM產(chǎn)業(yè)生態(tài)。另一方面,面對越來越復(fù)雜的數(shù)據(jù)庫調(diào)用需求和智能時代大量任務(wù)需要異構(gòu)計算的現(xiàn)實(shí),GaussDB還可以利用 AI芯片、GPU 、ARM、NPU等多種算力組合,讓數(shù)據(jù)庫獲得強(qiáng)大的異構(gòu)計算能力。在權(quán)威標(biāo)準(zhǔn)測試集TPC-DS上,性能比業(yè)界提升50%,排名第一。

在此基礎(chǔ)之上,為什么說GaussDB是對智能時代的擁抱呢?原因在于其采用了華為獨(dú)創(chuàng)的AI-Native技術(shù)。這項(xiàng)技術(shù)的價值在于,華為將機(jī)器學(xué)習(xí)能力加入到了分布式數(shù)據(jù)庫的全生命周期當(dāng)中。運(yùn)用“自動駕駛網(wǎng)絡(luò)”,對數(shù)據(jù)庫進(jìn)行具備主動學(xué)習(xí)和理解特征的自我調(diào)優(yōu)、自診斷自愈、自運(yùn)維。

這個技術(shù)創(chuàng)新的核心價值,在于利用AI技術(shù)在多個層面的融入,解決了數(shù)據(jù)規(guī)模越來越大、結(jié)構(gòu)越來越復(fù)雜之后,帶給用戶的運(yùn)維難題。

當(dāng)數(shù)據(jù)庫體量巨大之后,人工運(yùn)維將是非常復(fù)雜,高消耗、低效率的一件事。而AI-Native的加入,則讓企業(yè)的運(yùn)維成本呈現(xiàn)出指數(shù)級下降。

有數(shù)據(jù)顯示,在交易、分析和混合負(fù)載場景下,華為基于深度強(qiáng)化學(xué)習(xí)的自調(diào)優(yōu)算法,能夠調(diào)優(yōu)性能把業(yè)界平均提升60%以上。

這些產(chǎn)品的發(fā)布,極大豐富了GaussDB的產(chǎn)品形態(tài),應(yīng)對了全行業(yè)日益復(fù)雜的數(shù)據(jù)庫產(chǎn)品需求。

右臂:FusionStorage 8.0帶來極致存儲體驗(yàn)

在數(shù)據(jù)爆發(fā)的今天,越來越多政企用戶開始抵達(dá)集中式存儲的瓶頸。結(jié)構(gòu)化數(shù)據(jù)的不斷延展,導(dǎo)致企業(yè)隨時需要擴(kuò)展存儲空間,同時保證存儲延展的可靠性和兼容性。

另一方面,大數(shù)據(jù)的規(guī)?;瘧?yīng)用和智能化的加深,也導(dǎo)致用戶開始需要高效率的存儲體驗(yàn),以確保存儲無損和高效存入調(diào)出。

為此,F(xiàn)usionStorage 8.0通過重定義存儲架構(gòu),為用戶帶來了存儲體驗(yàn)的新高度。

首先在核心性能上,F(xiàn)usionStorage 8.0采用華為ARM-based處理器鯤鵬920加速,使IOPS提升了20%,結(jié)合華為AI Fabric無損網(wǎng)絡(luò),時延降低了15%。其在SPC-1的性能測試中,單節(jié)點(diǎn)性能達(dá)到了16.8萬IOPS以及1ms以內(nèi)時延,能夠適應(yīng)企業(yè)核心業(yè)務(wù)存儲的需求。

存儲產(chǎn)品的另一個痛點(diǎn),在于多類存儲之間存在不可兼容性。一旦企業(yè)數(shù)據(jù)復(fù)雜化增加,就會讓存儲成本和工作復(fù)雜性極大提高。為此,F(xiàn)usionStorage 8.0打破了架構(gòu)壁壘,創(chuàng)新實(shí)現(xiàn)一套系統(tǒng)同時支持塊、文件、對象、HDFS 協(xié)議,也就是說1套存儲能夠支持4類主要存儲能力,讓用戶的多場景業(yè)務(wù)統(tǒng)一存儲成為可能。

而與GaussDB一樣,F(xiàn)usionStorage新產(chǎn)品同樣加持了華為在AI技術(shù)方面的智能化能力。FusionStorage 8.0版本,通過云上AI訓(xùn)練和本地AI芯片的加持,將智能管理貫穿業(yè)務(wù)使用的全生命周期。

比如業(yè)務(wù)上線前對存儲資源進(jìn)行智能規(guī)劃,使用過程中通過機(jī)器學(xué)習(xí)識別能力,對業(yè)務(wù)進(jìn)行風(fēng)險預(yù)判及故障定位等等,智能運(yùn)維管理覆蓋業(yè)務(wù)全流程,從而得以整體性地大幅提升存儲效率。

高效能、跨結(jié)構(gòu)和智能化,讓FusionStorage 8.0從多個維度開始追逐“極致存儲”的稱號。反過來看,我們可以發(fā)現(xiàn)華為存儲與數(shù)據(jù)庫產(chǎn)品挑戰(zhàn)新臺階的過程,事實(shí)上也代表著數(shù)據(jù)產(chǎn)品的發(fā)展趨勢:用智能能力,擁抱智能時代。

用智能能力擁抱數(shù)據(jù),用更好的數(shù)據(jù)產(chǎn)品擁抱智能時代

毫無疑問,未來是屬于智能時代的。AI為代表的智能技術(shù)將滲透入每一個企業(yè)與組織,在無數(shù)個角落生成生產(chǎn)力的進(jìn)步。然而這個宏偉的時代,今天必須以數(shù)據(jù)產(chǎn)品的可靠、可用、安全為前提。

但是如何讓數(shù)據(jù)產(chǎn)品達(dá)到這些目標(biāo)呢?在華為看來,這就需要智能技術(shù)的滲透,以及多種ICT技術(shù)的融合與突破創(chuàng)新。

從GaussDB和FusionStorage的發(fā)展軌跡來看,今天數(shù)據(jù)庫和存儲想要滿足新的產(chǎn)業(yè)需求,必須經(jīng)歷三項(xiàng)面向智能時代的普遍升級。只有如此才能應(yīng)對日益復(fù)雜的數(shù)據(jù)挑戰(zhàn),為產(chǎn)業(yè)用戶從多方面消解迎面而來的“數(shù)據(jù)高壓”。

1、數(shù)據(jù)洪流面前的百渠能力。大數(shù)據(jù)時代,分布式數(shù)據(jù)存儲成為主流。分布式數(shù)據(jù)結(jié)構(gòu),從本質(zhì)上來說就是將洶涌而來的數(shù)據(jù)洪水,分散到千百水渠中。以疏代堵,分壓數(shù)據(jù)洪流。而這一過程中,需要數(shù)據(jù)極簡不斷進(jìn)化抗壓能力、數(shù)據(jù)吞吐能力以及安全性能。而這需要考驗(yàn)存儲、計算、網(wǎng)絡(luò)、AI等多個技術(shù)領(lǐng)域的積累和實(shí)力,利用技術(shù)協(xié)同優(yōu)勢打造數(shù)據(jù)產(chǎn)品的創(chuàng)新解決方案。比如在FusionStorage 8.0中,就集成了華為在計算、網(wǎng)絡(luò)和存儲多領(lǐng)域的芯片和算法積累。

2、智能落地,是減輕企業(yè)數(shù)據(jù)負(fù)擔(dān)的有效方式。在今天,數(shù)據(jù)的吞吐與儲存,正在變成一件異常復(fù)雜的工作。其中人力無法觸及的領(lǐng)域正在增加,而想要舒緩用戶在數(shù)據(jù)領(lǐng)域的成本,智能化就是必不可少的路徑。我們可以看到,智能化的自動駕駛網(wǎng)絡(luò),正在從方方面面進(jìn)入華為的ICT產(chǎn)品中。這條全新的賽道,正在決定數(shù)據(jù)基建在新產(chǎn)業(yè)周期中的成敗。

3、架構(gòu)打通之路刻不容緩。數(shù)據(jù)領(lǐng)域的另一個命題,是異構(gòu)計算和多類型存儲正在成為大量企業(yè)新的需求。而在智能化業(yè)務(wù)發(fā)展之際,這個需求只能是正向提升的。因此打通原本封閉的各計算與存儲架構(gòu),實(shí)現(xiàn)數(shù)據(jù)基礎(chǔ)設(shè)施的“一以貫之,化繁為簡”,也是這一領(lǐng)域的核心進(jìn)化方向。

本著這三條路徑,華為在數(shù)據(jù)基建領(lǐng)域,用兩款智能化新產(chǎn)品作為手臂,給予數(shù)據(jù)產(chǎn)業(yè)以一個深情的擁抱。這個擁抱的含義或許在于,即使是最基本的數(shù)據(jù)基礎(chǔ)設(shè)施,在今天的產(chǎn)業(yè)革命面前,也可以是一首復(fù)雜精巧的詠嘆調(diào):發(fā)現(xiàn)需求,克服障礙,勇敢創(chuàng)新,這些音符布滿其中,讓每一項(xiàng)技術(shù)創(chuàng)新都充滿韻味。

免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個人觀點(diǎn),與極客網(wǎng)無關(guān)。文章僅供讀者參考,并請自行核實(shí)相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2019-05-15
數(shù)據(jù)基礎(chǔ)設(shè)施的詠嘆調(diào):華為給大數(shù)據(jù)時代一個智能擁抱
在云、數(shù)據(jù)和AI開始成為每一座城市、每一家企業(yè),甚至每個家庭的必備品時,我們仔細(xì)審視一下這些技術(shù)的發(fā)展邏輯,可能會發(fā)現(xiàn)像電氣化時代的“煤鐵”一樣,今天這個時間節(jié)點(diǎn)的基礎(chǔ)設(shè)施,是數(shù)據(jù)庫與存儲。

長按掃碼 閱讀全文