讓數(shù)據(jù)分析極速統(tǒng)一!阿里云和StarRocks一起干了件大事

“過去,僅僅是管理層少數(shù)人定期查看各種數(shù)據(jù)報表;如今,哪怕基層員工都是數(shù)據(jù)消費者,日常業(yè)務(wù)中隨時需要使用歷史數(shù)據(jù)和實時數(shù)據(jù)做決策,這種趨勢將不可阻擋。”去年一家銀行數(shù)據(jù)部負(fù)責(zé)人對大數(shù)據(jù)在線如是說。

的確,這就是當(dāng)下各行各業(yè)的現(xiàn)狀。隨著企業(yè)數(shù)字化轉(zhuǎn)型的深入,數(shù)據(jù)分析不僅越來越依賴歷史數(shù)據(jù),也越來越需要利用實時數(shù)據(jù)進行決策。隨著數(shù)據(jù)分析模式發(fā)生巨大變化,如何對歷史數(shù)據(jù)和實時數(shù)據(jù)進行極速統(tǒng)一的分析,將成為每一個企業(yè)在未來幾年要重點攻克的問題。

然而,哪怕是Snowflake和Databricks這兩大數(shù)據(jù)分析領(lǐng)域的明星企業(yè),當(dāng)前也無法對實時數(shù)據(jù)進行有效分析。如何對歷史數(shù)據(jù)和實時數(shù)據(jù)進行極速統(tǒng)一的分析,是新一代數(shù)據(jù)架構(gòu)創(chuàng)新者需要重點攻克的難題。

StarRocks成立兩年多來,一直致力于打造“極速統(tǒng)一”的全新數(shù)據(jù)架構(gòu),可以對歷史數(shù)據(jù)和實時數(shù)據(jù)進行極速統(tǒng)一分析,從而為數(shù)據(jù)分析和數(shù)據(jù)洞察帶來革命性改變。當(dāng)前,騰訊、順豐、Airbnb、攜程、京東、眾安保險等不少行業(yè)頭部公司正借助StarRocks構(gòu)建統(tǒng)一的OLAP平臺,數(shù)據(jù)分析體驗獲得全面提升。

StarRocks和阿里云近日共同發(fā)布了阿里云EMR StarRocks云服務(wù)。一個是全球云計算Top 3、中國第一的云服務(wù)商,一個是近年來迅速崛起的專注打造下一代“極速統(tǒng)一”數(shù)據(jù)架構(gòu)的公司,二者合作打造出了低門檻、低成本的極速統(tǒng)一分析服務(wù),真正開啟了數(shù)據(jù)分析的新范式。

“全面分析數(shù)據(jù)”-數(shù)字化轉(zhuǎn)型的關(guān)鍵能力

人們常言:數(shù)據(jù)即21世紀(jì)的石油。與石油需要開采、存儲和提煉才能使用類似,數(shù)據(jù)也需要經(jīng)過采集存儲和挖掘分析,才能將價值體現(xiàn)出來。

在越來越多的企業(yè)中,比如互聯(lián)網(wǎng),銀行、保險、物流,大型零售等,一線業(yè)務(wù)人員都需要對業(yè)務(wù)實時變化進行分析,及時調(diào)整業(yè)務(wù)決策,讓業(yè)務(wù)獲得最大的成果。雙十一促銷策略、物流配送策略、用戶推薦策略、金融投資組合等等,都需要實時調(diào)整。

在未來三到五年,實時數(shù)據(jù)分析將和歷史數(shù)據(jù)分析一樣,成為企業(yè)數(shù)字化經(jīng)營的核心能力。能不能對歷史數(shù)據(jù)和實時數(shù)據(jù)進行極速統(tǒng)一的全面分析,將成為每一個企業(yè)數(shù)字化轉(zhuǎn)型的關(guān)鍵能力。

當(dāng)前,企業(yè)的歷史數(shù)據(jù)都存儲在數(shù)據(jù)湖中,實時數(shù)據(jù)存儲在OLTP數(shù)據(jù)庫中。為了幫助企業(yè)打造極速統(tǒng)一的數(shù)據(jù)架構(gòu),StarRocks和阿里云EMR團隊聯(lián)合打造了數(shù)據(jù)湖極速分析能力,基于StarRocks可以對數(shù)據(jù)湖的歷史數(shù)據(jù)進行極速分析。另外,雙方也打造了Flink+StarRocks的聯(lián)合方案,可以簡單快速地構(gòu)建實時鏈路,實現(xiàn)對實時數(shù)據(jù)的極速分析。

走向“極速統(tǒng)一”的數(shù)據(jù)分析新范式

StarRocks和阿里云雙方一直致力于幫助用戶打造極速統(tǒng)一的新架構(gòu),讓用戶可以同時對歷史數(shù)據(jù)和實時數(shù)據(jù)進行極速統(tǒng)一分析。

近期推出的阿里云EMR StarRocks可以非常出色地分析存儲在Hive、Iceberg和Hudi等數(shù)據(jù)湖里的數(shù)據(jù),當(dāng)前性能已經(jīng)可以達(dá)到世界頂級同類產(chǎn)品(比如Presto/Trino)的3-5倍以上。

另外,在實時數(shù)據(jù)分析方面,阿里云EMR StarRocks可以非常好地支持業(yè)務(wù)數(shù)據(jù)變更,對業(yè)務(wù)變更數(shù)據(jù)的查詢性能比ClickHouse等世界頂級同類產(chǎn)品快3-5倍以上。

在StarRocks社區(qū)和阿里云的共同努力下,在支持歷史數(shù)據(jù)和實時數(shù)據(jù)的極速統(tǒng)一分析方面,StarRocks在世界范圍內(nèi)已經(jīng)達(dá)到了非常領(lǐng)先的水平。

當(dāng)前,StarRocks產(chǎn)品已經(jīng)在多個行業(yè)的諸多頭部客戶的業(yè)務(wù)場景中得到驗證,并且獲得了用戶的廣泛認(rèn)可。以眾安保險為例,為了更好地支持業(yè)務(wù)數(shù)字化運營,眾安保險基于StarRocks構(gòu)建了全新的數(shù)據(jù)分析平臺,可以一站式地對歷史數(shù)據(jù)和實時數(shù)據(jù)進行極速的復(fù)雜分析,實現(xiàn)了零代碼拖拽式分析與秒級響應(yīng)。公司多個部門超過3000 ?在日常中廣泛使用,提升超過 50% 的數(shù)據(jù)分析效率,降低了眾安 40% 的??成本。

StarRocks,新一代計算引擎的創(chuàng)新者

在按列存儲技術(shù)取代按行存儲以后,計算技術(shù)已經(jīng)從按行計算轉(zhuǎn)為按列做向量化計算。當(dāng)前,Databricks、BigQuery等行業(yè)領(lǐng)頭羊,都在開始大力打造全面向量化的計算引擎。

StarRocks在兩年半前投入到向量化計算引擎的攻堅克難中,通過數(shù)千個優(yōu)化,當(dāng)前其計算引擎在世界范圍達(dá)到了非常領(lǐng)先的水平,比傳統(tǒng)計算引擎快3倍以上。極速的向量化計算引擎就像電動汽車的發(fā)動機,擁有了世界頂尖的計算引擎,StarRocks有望成為新一代極速統(tǒng)一數(shù)據(jù)架構(gòu)的引領(lǐng)者。

基于StarRocks構(gòu)建的新架構(gòu),企業(yè)就能夠?qū)v史數(shù)據(jù)和實時數(shù)據(jù)進行極速統(tǒng)一的分析,滿足各種業(yè)務(wù)場景的需求。

StarRocks為何值得用戶持續(xù)關(guān)注

數(shù)據(jù)庫被譽為“根技術(shù)”,乃基礎(chǔ)軟件皇冠上的明珠。進入到數(shù)智化時代,歷久彌新的數(shù)據(jù)庫迎來前所未有的變革期。

數(shù)據(jù)分析能力正在成為企業(yè)數(shù)字化轉(zhuǎn)型的重點。StarRocks等新一代數(shù)據(jù)庫公司之所以值得持續(xù)關(guān)注,在于它們身處一條極有前途的賽道。

以StarRocks為例,面世以來兩年多的時間里,已被超過110家市值或估值在10億美金以上的大型用戶用于生產(chǎn)環(huán)境,生產(chǎn)環(huán)境中穩(wěn)定運行的 StarRocks 服務(wù)器數(shù)目達(dá)數(shù)千臺,成長速度驚人。

如今,隨著阿里云EMR StarRocks服務(wù)的推出,雙方有望將極速統(tǒng)一的數(shù)據(jù)分析能力賦能給更多行業(yè)用戶。

面向未來,StarRocks還將持續(xù)投入到技術(shù)產(chǎn)品和社區(qū)生態(tài)建設(shè)上,吸納更多開發(fā)者和用戶,從而達(dá)成更多的世界領(lǐng)先。

免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個人觀點,與極客網(wǎng)無關(guān)。文章僅供讀者參考,并請自行核實相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。

極客網(wǎng)企業(yè)會員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2022-05-29
讓數(shù)據(jù)分析極速統(tǒng)一!阿里云和StarRocks一起干了件大事
然而,哪怕是Snowflake和Databricks這兩大數(shù)據(jù)分析領(lǐng)域的明星企業(yè),當(dāng)前也無法對實時數(shù)據(jù)進行有效分析。

長按掃碼 閱讀全文