原標題:必須建筑師附體!像蓋大樓那樣打造數(shù)據(jù)即服務(wù)
近兩年產(chǎn)業(yè)界總用“數(shù)據(jù)洪流”來形容數(shù)據(jù)的大爆發(fā),但如果我們真把它視作洪水,那么它只會帶來沖擊;如能積極發(fā)掘其潛藏的價值,它則可能變成一條流金之河,正如麥肯錫在研究中發(fā)現(xiàn)的那樣:與競爭對手相比,能使用數(shù)據(jù)識別客戶行為的企業(yè),在銷售增長率方面要高出85%,在毛利率方面會高出25%[1]。
這個道理,其實大多數(shù)企業(yè)都清楚,但要構(gòu)建完善的數(shù)據(jù)處理和分析平臺,難度并不比構(gòu)建AI應(yīng)用平臺低,對他們而言,通過公有云服務(wù)獲得這種能力反而更現(xiàn)實。
那么,云服務(wù)提供商應(yīng)該怎樣做,才能打造出一個高效、全面和可靠的數(shù)據(jù)即服務(wù)呢?根據(jù)先行者們的經(jīng)驗,導(dǎo)入“建筑師”思維是必需的,也就是說,要用蓋大樓那樣的思路來構(gòu)建數(shù)據(jù)即服務(wù)。
就像起高樓必須先挖地基一樣,云服務(wù)提供商首先要考慮數(shù)據(jù)即服務(wù)的“地基”,也就是數(shù)據(jù)存儲的問題。在各行各業(yè)全面擁抱數(shù)字化趨勢的今天,存儲服務(wù)的要求更多地體現(xiàn)為:容量和性能要實現(xiàn)高效擴展,相關(guān)資源可進行靈活調(diào)配和快速交付。
接下來,在數(shù)據(jù)存儲的“地基”之上,要筑起堅實的“樓體”,也就是提供數(shù)據(jù)庫即服務(wù),將繁瑣的數(shù)據(jù)庫預(yù)置、配置、優(yōu)化、備份、安全、監(jiān)控、聯(lián)網(wǎng)、自動化、升級及維護等操作,全部交給自動化數(shù)據(jù)庫管理系統(tǒng)來處理。
最后一步,就是要在“樓體”上加裝頂層,也就是大數(shù)據(jù)或數(shù)據(jù)分析即服務(wù),海量數(shù)據(jù)將通過它的清洗、挖掘、分析和可視化等操作,提煉出高價值、易理解和檢索的關(guān)鍵信息,或者說是洞察。
云服務(wù)提供商還需要確保上述不同層級間各模塊和功能之間能形成協(xié)作,而非各自為政。如金山云的數(shù)據(jù)即分析服務(wù)KMR(Kingsoft MapReduce),就與其對象存儲KS3?表格數(shù)據(jù)庫服務(wù)和關(guān)系型數(shù)據(jù)庫服務(wù)(KRDS)實現(xiàn)了集成。其用例之一,就是用戶可在得到分析結(jié)果后將其存入KS3,然后釋放按時計費的KMR集群,以節(jié)省成本[2]。
有了設(shè)計思路,云服務(wù)提供商就要操心“鋼筋水泥”,即基礎(chǔ)設(shè)施的選擇了。由于這個體系自下而上,對硬件的需求從重存儲,漸漸過渡到重計算,所以這兩點就是考量的重點。
先談存儲,數(shù)據(jù)即服務(wù)應(yīng)優(yōu)先考慮軟件定義存儲,它利于創(chuàng)建跨服務(wù)產(chǎn)品使用,且易于管理和調(diào)配的共享存儲資源池。
英特爾平臺+Ceph技術(shù)是實施軟件定義存儲的理想之選。Ceph是目前唯一能提供開源存儲、軟件定義存儲、企業(yè)級存儲和統(tǒng)一存儲(對象、塊和文件)的解決方案。它與至強處理器搭配,再輔以英特爾智能存儲加速庫(讓應(yīng)用能使用至強加速與數(shù)據(jù)保護、完整性和安全性相關(guān)的任務(wù))、高速緩存加速軟件(讓Ceph可通過智能緩存提高性能),以及高性能、低延遲、高穩(wěn)定和耐用的英特爾固態(tài)盤和傲騰固態(tài)盤等技術(shù),可輸出令人滿意的性能和總擁有成本。
再談計算,英特爾的優(yōu)勢更加明顯:不僅有新一代至強可擴展處理器憑借全新微架構(gòu)帶來的加成,還有諸多開源和商業(yè)版本數(shù)據(jù)庫及數(shù)據(jù)處理和分析技術(shù),如Apache Hadoop、Spark、SAPHANA帶來的“眾星捧月”效果。兩者融合就產(chǎn)出了一串更誘人的數(shù)據(jù),如SAP HANA每小時執(zhí)行的查詢量可提高至1.5倍[3],IBM DB2批量分析的平均速度提高至1.4倍[4]。
這些英特爾新技術(shù)帶來的功效可不是紙上談兵,拋兩個身邊的真實“戰(zhàn)例”:
- 騰訊金融云TDSQL服務(wù)升級采用至強可擴展處理器、英特爾Omni-Path架構(gòu)和傲騰固態(tài)盤,寫性能提高至原來的3倍,讀性能提升到原來的4倍,整體性能提升至原來的1.7倍[5]。
- 用友分析云平臺在升級使用至強鉑金8180處理器后,性能歸一化指標比使用至強E7-8890 v4時提升42%,搭配傲騰固態(tài)盤后,性能更是提升達92%[6]。
數(shù)據(jù)與信息來源:
[1]: 麥肯錫,2017年,《利用您的客戶數(shù)據(jù)獲取價值》,https://www.mckinsey.com/business-functions/mckinsey-analytics/our-insights/capturing-value-from-your-customer-data
[2]: 白皮書《金山云助力實現(xiàn)云端數(shù)據(jù)分析》,https://www.intel.cn/content/www/cn/zh/cloud-computing/kingsoft-cloud-enables-data-analytics-in-the-cloud.html
[3]、[4]: 白皮書《數(shù)據(jù)分析:面向云服務(wù)提供商的指南》,https://connect.intel.com/analytics_eguide_reg
[5]: 白皮書《鑄就智慧金融的“芯”動力——英特爾助力騰訊云提供基于TDSQL的高效、安全金融云服務(wù)》,https://www.intel.cn/content/www/cn/zh/cloud-computing/tencent-financial-cloud-case-study.html
[6]: 白皮書《英特爾技術(shù)助力用友分析云向用戶提供全分析服務(wù)解決方案》,即將上傳。
并發(fā)、時延、成本等各方面,都對云平臺的基礎(chǔ)設(shè)施提出了更高的要求。點擊“閱讀原文”,登上至強特快專列,了解成功的云服務(wù)提供商如何高效打造差異化的云服務(wù)。
- 美媒聚焦比亞迪“副業(yè)”:電子代工助力蘋果,下個大計劃瞄準AI機器人
- 微信零錢通新政策:銀行卡轉(zhuǎn)入資金提現(xiàn)免手續(xù)費引熱議
- 消息稱塔塔集團將收購和碩印度iPhone代工廠60%股份 并接管日常運營
- 蘋果揭秘自研芯片成功之道:領(lǐng)先技術(shù)與深度整合是關(guān)鍵
- 英偉達新一代Blackwell GPU面臨過熱挑戰(zhàn),交付延期引發(fā)市場關(guān)注
- 馬斯克能否成為 AI 部部長?硅谷與白宮的聯(lián)系日益緊密
- 余承東:Mate70將在26號發(fā)布,意外泄露引發(fā)關(guān)注
- 無人機“黑科技”亮相航展:全球首臺低空重力測量系統(tǒng)引關(guān)注
- 賽力斯發(fā)布聲明:未與任何伙伴聯(lián)合開展人形機器人合作
- 賽力斯觸及漲停,汽車整車股盤初強勢拉升
免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。