數(shù)據(jù)處理的實(shí)時(shí)性難題終于被破解了，如何做到的？

原標(biāo)題：數(shù)據(jù)處理的實(shí)時(shí)性難題終于被破解了，如何做到的？

大數(shù)據(jù)時(shí)代，業(yè)務(wù)數(shù)據(jù)沉淀和數(shù)據(jù)計(jì)算已經(jīng)滲透到各行各業(yè)并創(chuàng)造著新的業(yè)務(wù)價(jià)值，百度智能云此次發(fā)布的實(shí)時(shí)流計(jì)算云服務(wù)就是在這一大環(huán)境下而誕生的。

在介紹這款云服務(wù)之前，先來(lái)了解一下什么是實(shí)時(shí)流計(jì)算？隨后，我們會(huì)重點(diǎn)介紹百度智能云發(fā)布的產(chǎn)品特性和應(yīng)用場(chǎng)景，助力企業(yè)用好實(shí)時(shí)流計(jì)算。

實(shí)時(shí)流計(jì)算的核心在“實(shí)時(shí)”

傳統(tǒng)的數(shù)據(jù)處理流程已經(jīng)為大眾所熟知，就是先收集數(shù)據(jù)并將其存入數(shù)據(jù)庫(kù)中，在需要的時(shí)候進(jìn)行數(shù)據(jù)查詢，得到數(shù)據(jù)結(jié)果。這樣的流程看起來(lái)非常合理，但是數(shù)據(jù)處理的時(shí)效性不高。在實(shí)際業(yè)務(wù)場(chǎng)景中，這種處理方式的結(jié)果是，很多數(shù)據(jù)的價(jià)值會(huì)隨著時(shí)間的流逝而逐漸消失。因此，大數(shù)據(jù)計(jì)算平臺(tái)需要盡可能的提升計(jì)算的時(shí)效性，獲取數(shù)據(jù)的最大價(jià)值。

傳統(tǒng)的離線處理流程如MapReduce等并不能很好地解決時(shí)效性問(wèn)題，這就引出了實(shí)時(shí)流計(jì)算的數(shù)據(jù)計(jì)算結(jié)構(gòu)。實(shí)時(shí)流計(jì)算能夠?qū)Ａ苛魇綌?shù)據(jù)進(jìn)行實(shí)時(shí)分析、輸出結(jié)果，整個(gè)過(guò)程僅間隔了一秒甚至是亞秒。

實(shí)時(shí)流計(jì)算在實(shí)際業(yè)務(wù)數(shù)據(jù)處理上的價(jià)值不可小覷，給企業(yè)帶來(lái)的便利也是顯而易見(jiàn)。為了應(yīng)對(duì)這種趨勢(shì)，百度智能云發(fā)布了一款用于云端流式數(shù)據(jù)實(shí)時(shí)處理的Serverless云服務(wù)：百度智能云流式計(jì)算BSC產(chǎn)品（以下簡(jiǎn)稱“BSC”）能幫助企業(yè)輕松接入存儲(chǔ)在多款百度智能云存儲(chǔ)服務(wù)（比如百度消息服務(wù)）的海量數(shù)據(jù)，免去企業(yè)對(duì)基礎(chǔ)設(shè)施的運(yùn)維和升級(jí)等一系列的基礎(chǔ)工作。

提供全生命周期服務(wù)

從下圖可以看出，BSC打通并深度融合多款百度智能云的云存儲(chǔ)服務(wù)作為上下游，只需簡(jiǎn)單配置就可輕松接入。

除了上面說(shuō)的打通多款云服務(wù)之外，BSC產(chǎn)品還具備以下幾個(gè)特點(diǎn)：

? 完全托管式服務(wù)

BSC為企業(yè)提供Serverless服務(wù)。企業(yè)在使用BSC進(jìn)行流式數(shù)據(jù)處理時(shí)，無(wú)需創(chuàng)建集群，避免了繁重的底層基礎(chǔ)設(shè)施日常運(yùn)維工作；企業(yè)甚至不用預(yù)先分配計(jì)算資源。

? 簡(jiǎn)單易用

相比傳統(tǒng)的Spark作業(yè)，BSC提供零代碼的作業(yè)創(chuàng)建方式，讓用戶通過(guò)SQL語(yǔ)句實(shí)現(xiàn)復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)處理；并且BSC提供具有多種輔助功能的SQL在線編輯器，大大降低使用門檻，提高易用性，提升效率。

? 按需服務(wù)

BSC會(huì)根據(jù)企業(yè)業(yè)務(wù)數(shù)據(jù)量的變動(dòng)，為流式處理作業(yè)設(shè)定相應(yīng)的計(jì)算資源，不僅確保了業(yè)務(wù)數(shù)據(jù)得到及時(shí)處理，而且避免了資源浪費(fèi)。

典型應(yīng)用場(chǎng)景

1、物設(shè)備監(jiān)控

在物聯(lián)網(wǎng)行業(yè)，物設(shè)備上的傳感器會(huì)定時(shí)上報(bào)數(shù)據(jù)，BSC可以對(duì)上報(bào)的數(shù)據(jù)進(jìn)行實(shí)時(shí)計(jì)算分析，篩選出超出正常范圍的數(shù)據(jù)，并及時(shí)輸出然后觸發(fā)報(bào)警。從而做到實(shí)時(shí)監(jiān)控偵測(cè)設(shè)備故障，及時(shí)避免潛在業(yè)務(wù)風(fēng)險(xiǎn)的發(fā)生。

2、金融風(fēng)控

金融風(fēng)控是另一種典型的實(shí)時(shí)計(jì)算應(yīng)用場(chǎng)景。對(duì)風(fēng)險(xiǎn)敏感度要求較高的金融業(yè)務(wù)來(lái)說(shuō)，僅通過(guò)數(shù)據(jù)可視化來(lái)統(tǒng)計(jì)業(yè)務(wù)數(shù)據(jù)，進(jìn)行業(yè)務(wù)數(shù)據(jù)運(yùn)營(yíng)是不夠的。針對(duì)金融欺詐等風(fēng)控業(yè)務(wù)，BSC可以發(fā)揮巨大作用。通過(guò)實(shí)時(shí)分析海量的用戶行為數(shù)據(jù)流，并結(jié)合一些風(fēng)險(xiǎn)模型的匹配規(guī)則，BSC可以幫助客戶及時(shí)發(fā)現(xiàn)異常事件、判斷風(fēng)險(xiǎn)等級(jí)，從而作出相應(yīng)的風(fēng)險(xiǎn)控制措施，如自動(dòng)化地去報(bào)警通知來(lái)避免損失。

3、個(gè)性化推薦

通常情況下，互聯(lián)網(wǎng)用戶對(duì)資訊、音樂(lè)、購(gòu)物等的訴求是千人千面的，并且這種訴求具有一定的時(shí)效性。以購(gòu)物為例，當(dāng)消費(fèi)者買到自己滿意的商品后，就不再需要其他同類商品。為了能夠?qū)崟r(shí)感知消費(fèi)者的需求變化，需要根據(jù)他們的瀏覽行為數(shù)據(jù)進(jìn)行實(shí)時(shí)計(jì)算分析。應(yīng)用BSC產(chǎn)品后，企業(yè)可以做到實(shí)時(shí)更新消費(fèi)者的喜愛(ài)偏好，不斷發(fā)現(xiàn)用戶新的喜好點(diǎn)，及時(shí)進(jìn)行個(gè)性化推薦。

除了上述經(jīng)典業(yè)務(wù)場(chǎng)景，BSC還可以廣泛的應(yīng)用于更多高時(shí)效性要求的場(chǎng)景。

歡迎測(cè)試

百度智能云流式計(jì)算BSC產(chǎn)品免費(fèi)公測(cè)現(xiàn)已火熱開(kāi)啟。同時(shí)，BSC技術(shù)團(tuán)隊(duì)也在馬不停蹄地對(duì)產(chǎn)品進(jìn)行持續(xù)迭代，為大家提供性能更加卓越、功能更加強(qiáng)大易用的實(shí)時(shí)流計(jì)算云服務(wù)。

生成海報(bào)

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。