“Your Data is Your differentiator(你的數(shù)據(jù)正是你的差異化競爭力所在。)”當(dāng)亞馬遜云科技CEO Adam Selipsky在re:Invent大會上說出這個觀點 ,引起全場參會者的共鳴。
的確,人們普遍認(rèn)為數(shù)據(jù)已是最重要的生產(chǎn)要素,所有身處數(shù)字化轉(zhuǎn)型之中的企業(yè)都在自問:我的數(shù)據(jù)有多少?質(zhì)量如何?是否能夠有效支撐業(yè)務(wù)應(yīng)用?
如今,云平臺已成為數(shù)據(jù)匯聚最重要的一個平臺,尤其是隨著生成式AI、大語言模型的崛起,云平臺上的數(shù)據(jù)打通、流動需求也隨之水漲船高,也讓Zero-ETL成為最為重要的技術(shù)趨勢。
在本次re:Invent大會上,亞馬遜云科技介紹了多項Zero-ETL集成特性,讓跨數(shù)據(jù)存儲的數(shù)據(jù)訪問與分析更快速、更便捷。正如亞馬遜云科技數(shù)據(jù)與人工智能副總裁Swami Sivasubramanian博士所言:“Zero-ETL能夠讓數(shù)據(jù)集成不再是繁瑣的手動任務(wù),使客戶能夠輕松獲取他們所需的數(shù)據(jù)和發(fā)掘數(shù)據(jù)價值?!?/p>
Zero-ETL成為大勢所趨
數(shù)字經(jīng)濟時代,數(shù)據(jù)如水,滋潤萬物生長。與水類似,數(shù)據(jù)只有流動和使用起來,方能釋放出巨大價值,否則就容易形成無數(shù)個數(shù)據(jù)沼澤,讓企業(yè)深陷其中。
Gartner調(diào)研數(shù)據(jù)顯示:分析師80%的時間用于發(fā)現(xiàn)和準(zhǔn)備數(shù)據(jù),知識型員工將50%的時間浪費在尋找數(shù)據(jù)、發(fā)現(xiàn)和糾正錯誤以及確認(rèn)不信任的數(shù)據(jù)來源上,數(shù)據(jù)科學(xué)家花60%的時間清理和組織數(shù)據(jù)。
顯然,數(shù)據(jù)相關(guān)技術(shù)發(fā)展到今天,已經(jīng)成為一個龐大的技術(shù)體系,數(shù)據(jù)要想真正高效發(fā)揮價值,數(shù)據(jù)技術(shù)體系必須有效解決數(shù)據(jù)流通等問題。尤其是隨著生成式AI浪潮的到來,數(shù)據(jù)如何形成高質(zhì)量的數(shù)據(jù)資產(chǎn)就極為迫切,所有企業(yè)都渴望能夠加速數(shù)據(jù)資產(chǎn)的形成。
事實上,當(dāng)前大部分企業(yè)普遍擁有不同類型、不同來源、規(guī)模與產(chǎn)生速度各異的海量數(shù)據(jù),企業(yè)需要整體解決方案來處理各種變量,以及集成和合并分散在多個來源的數(shù)據(jù)。
在亞馬遜云科技看來,數(shù)據(jù)要形成資產(chǎn),并且實現(xiàn)Data for AI,主要有三個方面:首先,需要一個強有力的數(shù)據(jù)平臺和各種數(shù)據(jù)工具,通過不斷增強的功能來提升數(shù)據(jù)平臺與數(shù)據(jù)工具的能力,從而加速數(shù)據(jù)創(chuàng)新的速度;其次,需要把所有數(shù)據(jù)工具之間整合打通,采用架構(gòu)的方式解決數(shù)據(jù)流動的問題,比如利用Zero-ETL架構(gòu)來消除數(shù)據(jù)處理等繁重的工作;第三,除了數(shù)據(jù)治理、數(shù)據(jù)處理之外,數(shù)據(jù)管控和數(shù)據(jù)發(fā)現(xiàn)也非常重要。
“從這三個方面做好工作,就能為生成式AI提供一個很好的數(shù)據(jù)基礎(chǔ)?!眮嗰R遜云科技大中華區(qū)解決方案架構(gòu)部總經(jīng)理代聞如是說。
事實上,為了幫助企業(yè)用戶迅速而輕松地連接和分析數(shù)據(jù),而無需構(gòu)建和管理復(fù)雜的提取、轉(zhuǎn)換和加載(ETL)數(shù)據(jù)管道,亞馬遜云科技近年來在多款產(chǎn)品中集成Zero-ETL特性,讓數(shù)據(jù)流動變得更加容易。在本次re:Invent大會上,Swami Sivasubramanian博士又宣布多項新服務(wù),為推動Zero-ETL走出了重要一步。
亞馬遜云科技全力推動Zero-ETL集成
眾所周知,ETL是將業(yè)務(wù)系統(tǒng)的數(shù)據(jù)經(jīng)過提?。‥xtract)、轉(zhuǎn)換清洗(Transform)和加載(Load)到數(shù)據(jù)倉庫、大數(shù)據(jù)平臺的過程,將企業(yè)中的分散、零亂、標(biāo)準(zhǔn)不統(tǒng)一的數(shù)據(jù)整合到一起,為企業(yè)的決策提供分析依據(jù)。
過去,ETL的工作極為依賴ETL工程師,當(dāng)數(shù)據(jù)量一般的時候,ETL工程師尚可對付;但隨著大數(shù)據(jù)時代的到來,面對海量數(shù)據(jù),ETL工程師需要耗費大量時間、精力在ETL環(huán)境,不僅成本高昂、管理復(fù)雜且容易發(fā)生間歇性錯誤,遠(yuǎn)遠(yuǎn)達(dá)不到業(yè)務(wù)的需求。
因此,亞馬遜云科技近年來推動Zero-ETL意義重大,可以進一步降低了數(shù)據(jù)融合的成本,實現(xiàn)數(shù)據(jù)價值的充分釋放。去年的re:Invent大會上,亞馬遜云科技已經(jīng)推出關(guān)于“Zero ETL”兩項全新的集成功能。在本次大會上,亞馬遜云科技又推出多項數(shù)據(jù)庫、數(shù)據(jù)倉庫的Zero-ETL集成特性,使得在Amazon Redshift中連接和分析多個關(guān)系型和非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)變得更加容易。
Swami Sivasubramanian博士認(rèn)為,除了合適的數(shù)據(jù)工具之外,還需要具備在企業(yè)范圍內(nèi)集成數(shù)據(jù)的能力,亞馬遜云科技推動Zero-ETL目的就是讓數(shù)據(jù)集成不再是繁瑣的手動任務(wù),客戶要能夠連接所有數(shù)據(jù),無論它們存儲在何處。
在本次大會上,亞馬遜云科技宣布針對Amazon Aurora PostgreSQL、Amazon DynamoDB、Amazon RDS for MySQL與Amazon Redshift的新Zero-ETL集成的預(yù)覽版正式可用。例如,這些集成有助于客戶快速、輕松地訪問Amazon Redshift中常用的關(guān)系型和非關(guān)系型數(shù)據(jù)庫的數(shù)據(jù),進行全面的分析??蛻糁恍柙跀?shù)據(jù)庫中選擇包含所需數(shù)據(jù)的數(shù)據(jù)表,數(shù)據(jù)便會自動復(fù)制到Amazon Redshift。
總體來看,生成式AI浪潮的到來,數(shù)據(jù)的重要性與日俱增,是企業(yè)獨特競爭力的關(guān)鍵所在。從今年re:Invent大會可以看出,亞馬遜云科技正在大力推動Zero-ETL的集成發(fā)展,陸續(xù)在多款數(shù)據(jù)庫、數(shù)據(jù)倉庫中集成Zero-ETL特性,這無疑會為亞馬遜云科技上數(shù)百萬企業(yè)的數(shù)據(jù)處理、數(shù)據(jù)價值釋放帶來極大幫助,真正幫助企業(yè)在AI時代中發(fā)揮自己的獨特競爭優(yōu)勢。
免責(zé)聲明:此文內(nèi)容為第三方自媒體作者發(fā)布的觀察或評論性文章,所有文字和圖片版權(quán)歸作者所有,且僅代表作者個人觀點,與極客網(wǎng)無關(guān)。文章僅供讀者參考,并請自行核實相關(guān)內(nèi)容。投訴郵箱:editor@fromgeek.com。
- 蜜度索驥:以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- 100億美元史上最大融資的背后,國內(nèi)外巨頭齊瞄準(zhǔn)Data+AI
- 有一種羨慕叫“別人家的年終獎”:京東采銷平均23薪,全網(wǎng)熱議“人的價值”
- 行業(yè)首個“人機大戰(zhàn)”對壘!AI翻譯已媲美人工
- 蘋果開啟年終大促,降價1200元,被國產(chǎn)手機嚇怕了?
- 1999 元起,OPPO A5 Pro 超防水、超抗摔、超耐用
- 長三角,如何把數(shù)據(jù)要素變成新長江?
- 大模型,在內(nèi)卷中尋找出口
- 比亞迪“天神之眼”重磅升級:無圖城市領(lǐng)航功能全國開通
- 不愿成為微信的支付寶,注定失敗
- 大廠年終獎全靠猜?京東帶頭透明化
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。