華為宣布啟動(dòng)數(shù)據(jù)基礎(chǔ)設(shè)施戰(zhàn)略并開源數(shù)據(jù)虛擬化引擎HetuEngine

以下是侯金龍演講全文：

華為公司的愿景與使命是：“把數(shù)字世界帶入每個(gè)人、每個(gè)家庭、每個(gè)組織，構(gòu)建萬物互聯(lián)的智能世界”。在智能世界，算力成為新生產(chǎn)力，數(shù)據(jù)成為新生產(chǎn)資料，“5G、AI、云”成為新生產(chǎn)工具，將使能千行百業(yè)邁入智能時(shí)代。

兩個(gè)月前，華為在全聯(lián)接大會(huì)上發(fā)布了“一云兩翼雙引擎”的鯤鵬計(jì)算產(chǎn)業(yè)布局，基于“鯤鵬+昇騰”雙引擎，全面啟航計(jì)算戰(zhàn)略，為世界提供最強(qiáng)算力。

“一云”是指華為云，是生態(tài)伙伴發(fā)展的黑土地?！皟梢怼笔侵钢悄苡?jì)算和智能數(shù)據(jù)。數(shù)據(jù)作為鯤鵬產(chǎn)業(yè)中的關(guān)鍵一翼，華為將圍繞數(shù)據(jù)構(gòu)建端到端的能力，包括存、算、用的能力，通過5G+云+AI能力，打造“融合、智能、開放”的數(shù)據(jù)基礎(chǔ)設(shè)施，釋放數(shù)據(jù)價(jià)值，讓智能無所不及！

首先，數(shù)據(jù)將驅(qū)動(dòng)客戶體驗(yàn)。當(dāng)你打開一個(gè)App，就會(huì)收到你感興趣的內(nèi)容推送。精準(zhǔn)推送的背后，其實(shí)就是數(shù)據(jù)在驅(qū)動(dòng)。比如快手，每天產(chǎn)生1.2億個(gè)內(nèi)容標(biāo)簽與用戶畫像實(shí)時(shí)匹配，數(shù)據(jù)運(yùn)營實(shí)現(xiàn)內(nèi)容精準(zhǔn)推送。

其次，在企業(yè)經(jīng)營活動(dòng)中，數(shù)據(jù)驅(qū)動(dòng)企業(yè)生產(chǎn)決策。以大港油田為例，在經(jīng)歷了50年持續(xù)開采后，面臨資源枯竭、產(chǎn)量下降的挑戰(zhàn)。2019年以來，大港油田采用華為大數(shù)據(jù)和AI技術(shù)，利用測井曲線，結(jié)合經(jīng)驗(yàn)?zāi)Ｐ蜕闪嗣靠诰目紫抖取B透率，找到了更多的新的油氣層。通過數(shù)據(jù)運(yùn)營，為長期穩(wěn)產(chǎn)500萬噸提供了決策支撐。

最后，我介紹下數(shù)據(jù)驅(qū)動(dòng)企業(yè)流程簡化。華為每年有近300萬人次出差，以前出差涉及考勤、機(jī)票、酒店，包括報(bào)銷等十幾個(gè)申請(qǐng)流程，現(xiàn)在只需要一個(gè)流程就可以真正實(shí)現(xiàn)“說走就走”。這是每天45萬次后臺(tái)數(shù)據(jù)關(guān)聯(lián)碰撞的結(jié)果。數(shù)據(jù)運(yùn)營，實(shí)現(xiàn)“讓數(shù)據(jù)多跑路，員工少跑腿”。

隨著5G、AI和云的普及，數(shù)據(jù)量正以驚人的速度增長：從1080P到4K、8K，視頻數(shù)據(jù)量將提升40倍，從4K到4K VR要增加6倍以上；未來每輛自動(dòng)駕駛汽車每天就會(huì)產(chǎn)生高達(dá)64 TB數(shù)據(jù)；深圳一個(gè)城市有超過200萬攝像頭，每天將產(chǎn)生80 PB數(shù)據(jù)，平均保存30天，大家希望保存更長時(shí)間；大量的數(shù)據(jù)過去只需存幾天，現(xiàn)在需要保存幾個(gè)月甚至永久保存。

根據(jù)預(yù)測，全球數(shù)據(jù)量將從2018年的33 ZB快速增長到2025年的180 ZB。但是，產(chǎn)生的數(shù)據(jù)中僅有不到2%被保存，而被保存的數(shù)據(jù)中僅有不到10%被應(yīng)用。

這些海量數(shù)據(jù)的增長背后是需要海量存儲(chǔ)和計(jì)算的資源，數(shù)據(jù)增長是無限的，而存儲(chǔ)資源卻是有限的。

我們希望對(duì)數(shù)據(jù)的采、存、算、管、用實(shí)施端到端的整合和優(yōu)化，讓數(shù)據(jù)在全生命周期內(nèi)更好用，數(shù)據(jù)的每比特發(fā)揮價(jià)值最大，數(shù)據(jù)的每比特成本最優(yōu)！

為實(shí)現(xiàn)這個(gè)追求，華為打造融合、智能、開放的數(shù)據(jù)基礎(chǔ)設(shè)施，讓數(shù)據(jù)系統(tǒng)從孤立走向融合，從復(fù)雜走向智能，從封閉走向開放：

數(shù)據(jù)應(yīng)用的核心包括存儲(chǔ)和分析。煙囪式IT業(yè)務(wù)系統(tǒng)帶來兩個(gè)問題：存的時(shí)候會(huì)產(chǎn)生多個(gè)冗余副本，且數(shù)據(jù)無法流動(dòng)，存儲(chǔ)成本高；分析的時(shí)候會(huì)導(dǎo)致大量數(shù)據(jù)搬遷，分析效率低。

通過10余年技術(shù)積累和創(chuàng)新，華為在存儲(chǔ)、數(shù)據(jù)庫和大數(shù)據(jù)技術(shù)上實(shí)現(xiàn)了一系列突破，通過打破4堵墻，讓數(shù)據(jù)的每比特發(fā)揮價(jià)值最大，數(shù)據(jù)的每比特成本最優(yōu)。

過去，主要依靠人來完成設(shè)備配置和運(yùn)維，運(yùn)維人員經(jīng)驗(yàn)和能力的高低決定了管理效率的優(yōu)劣。華為基于AI芯片、存儲(chǔ)和華為云的三層架構(gòu)，通過云上訓(xùn)練和云下推理，讓系統(tǒng)越用越快、越用越省。

隨著業(yè)務(wù)類型日益增多，大量業(yè)務(wù)需要跨平臺(tái)、跨數(shù)據(jù)源協(xié)同分析。這種場景下，最突出的3個(gè)問題是：找數(shù)難、取數(shù)難、用數(shù)難。

我們將數(shù)據(jù)虛擬化引擎命名為河圖，就是屏蔽數(shù)據(jù)基礎(chǔ)設(shè)施的復(fù)雜度，讓開發(fā)者像使用數(shù)據(jù)庫一樣使用大數(shù)據(jù)，復(fù)用現(xiàn)有的生態(tài)、工具和技能，提升開發(fā)效率2到10倍?！按笥淼煤訄D后始見清明”，傳說中，大禹通過河圖掌握河流山川復(fù)雜的地形地貌，順利完成治水大業(yè)。

河圖引擎，就是要讓數(shù)據(jù)治理簡單，使用簡單，更方便的挖掘數(shù)據(jù)價(jià)值。它具備4個(gè)核心能力：

為了更好地發(fā)展數(shù)據(jù)產(chǎn)業(yè)，今天我宣布開源河圖引擎，開源版本的河圖引擎叫openHetu，將于2020年6月上線。我們將開源內(nèi)核，開發(fā)者可以基于開源代碼進(jìn)行定制，包括數(shù)據(jù)源擴(kuò)展、SQL執(zhí)行策略等，實(shí)現(xiàn)應(yīng)用快速對(duì)接，提升開發(fā)效率。

華為Cloud & AI產(chǎn)品與服務(wù)總裁侯金龍宣布開源數(shù)據(jù)虛擬化引擎HetuEngine