數(shù)據(jù)處理的實時性難題終于被破解了，如何做到的？

原標題：數(shù)據(jù)處理的實時性難題終于被破解了，如何做到的？

大數(shù)據(jù)時代，業(yè)務(wù)數(shù)據(jù)沉淀和數(shù)據(jù)計算已經(jīng)滲透到各行各業(yè)并創(chuàng)造著新的業(yè)務(wù)價值，百度智能云此次發(fā)布的實時流計算云服務(wù)就是在這一大環(huán)境下而誕生的。

在介紹這款云服務(wù)之前，先來了解一下什么是實時流計算？隨后，我們會重點介紹百度智能云發(fā)布的產(chǎn)品特性和應(yīng)用場景，助力企業(yè)用好實時流計算。

實時流計算的核心在“實時”

傳統(tǒng)的數(shù)據(jù)處理流程已經(jīng)為大眾所熟知，就是先收集數(shù)據(jù)并將其存入數(shù)據(jù)庫中，在需要的時候進行數(shù)據(jù)查詢，得到數(shù)據(jù)結(jié)果。這樣的流程看起來非常合理，但是數(shù)據(jù)處理的時效性不高。在實際業(yè)務(wù)場景中，這種處理方式的結(jié)果是，很多數(shù)據(jù)的價值會隨著時間的流逝而逐漸消失。因此，大數(shù)據(jù)計算平臺需要盡可能的提升計算的時效性，獲取數(shù)據(jù)的最大價值。

傳統(tǒng)的離線處理流程如MapReduce等并不能很好地解決時效性問題，這就引出了實時流計算的數(shù)據(jù)計算結(jié)構(gòu)。實時流計算能夠?qū)Ａ苛魇綌?shù)據(jù)進行實時分析、輸出結(jié)果，整個過程僅間隔了一秒甚至是亞秒。

實時流計算在實際業(yè)務(wù)數(shù)據(jù)處理上的價值不可小覷，給企業(yè)帶來的便利也是顯而易見。為了應(yīng)對這種趨勢，百度智能云發(fā)布了一款用于云端流式數(shù)據(jù)實時處理的Serverless云服務(wù)：百度智能云流式計算BSC產(chǎn)品（以下簡稱“BSC”）能幫助企業(yè)輕松接入存儲在多款百度智能云存儲服務(wù)（比如百度消息服務(wù)）的海量數(shù)據(jù)，免去企業(yè)對基礎(chǔ)設(shè)施的運維和升級等一系列的基礎(chǔ)工作。

提供全生命周期服務(wù)

從下圖可以看出，BSC打通并深度融合多款百度智能云的云存儲服務(wù)作為上下游，只需簡單配置就可輕松接入。

除了上面說的打通多款云服務(wù)之外，BSC產(chǎn)品還具備以下幾個特點：

? 完全托管式服務(wù)

BSC為企業(yè)提供Serverless服務(wù)。企業(yè)在使用BSC進行流式數(shù)據(jù)處理時，無需創(chuàng)建集群，避免了繁重的底層基礎(chǔ)設(shè)施日常運維工作；企業(yè)甚至不用預先分配計算資源。

? 簡單易用

相比傳統(tǒng)的Spark作業(yè)，BSC提供零代碼的作業(yè)創(chuàng)建方式，讓用戶通過SQL語句實現(xiàn)復雜業(yè)務(wù)邏輯的數(shù)據(jù)處理；并且BSC提供具有多種輔助功能的SQL在線編輯器，大大降低使用門檻，提高易用性，提升效率。

? 按需服務(wù)

BSC會根據(jù)企業(yè)業(yè)務(wù)數(shù)據(jù)量的變動，為流式處理作業(yè)設(shè)定相應(yīng)的計算資源，不僅確保了業(yè)務(wù)數(shù)據(jù)得到及時處理，而且避免了資源浪費。

典型應(yīng)用場景

1、物設(shè)備監(jiān)控

在物聯(lián)網(wǎng)行業(yè)，物設(shè)備上的傳感器會定時上報數(shù)據(jù)，BSC可以對上報的數(shù)據(jù)進行實時計算分析，篩選出超出正常范圍的數(shù)據(jù)，并及時輸出然后觸發(fā)報警。從而做到實時監(jiān)控偵測設(shè)備故障，及時避免潛在業(yè)務(wù)風險的發(fā)生。

2、金融風控

金融風控是另一種典型的實時計算應(yīng)用場景。對風險敏感度要求較高的金融業(yè)務(wù)來說，僅通過數(shù)據(jù)可視化來統(tǒng)計業(yè)務(wù)數(shù)據(jù)，進行業(yè)務(wù)數(shù)據(jù)運營是不夠的。針對金融欺詐等風控業(yè)務(wù)，BSC可以發(fā)揮巨大作用。通過實時分析海量的用戶行為數(shù)據(jù)流，并結(jié)合一些風險模型的匹配規(guī)則，BSC可以幫助客戶及時發(fā)現(xiàn)異常事件、判斷風險等級，從而作出相應(yīng)的風險控制措施，如自動化地去報警通知來避免損失。

3、個性化推薦

通常情況下，互聯(lián)網(wǎng)用戶對資訊、音樂、購物等的訴求是千人千面的，并且這種訴求具有一定的時效性。以購物為例，當消費者買到自己滿意的商品后，就不再需要其他同類商品。為了能夠?qū)崟r感知消費者的需求變化，需要根據(jù)他們的瀏覽行為數(shù)據(jù)進行實時計算分析。應(yīng)用BSC產(chǎn)品后，企業(yè)可以做到實時更新消費者的喜愛偏好，不斷發(fā)現(xiàn)用戶新的喜好點，及時進行個性化推薦。

除了上述經(jīng)典業(yè)務(wù)場景，BSC還可以廣泛的應(yīng)用于更多高時效性要求的場景。

歡迎測試

百度智能云流式計算BSC產(chǎn)品免費公測現(xiàn)已火熱開啟。同時，BSC技術(shù)團隊也在馬不停蹄地對產(chǎn)品進行持續(xù)迭代，為大家提供性能更加卓越、功能更加強大易用的實時流計算云服務(wù)。

生成海報

免責聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關(guān)資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。