Hadoop服務(wù)器配置不當(dāng) 造成5PB數(shù)據(jù)泄露

根據(jù)John Matherly的說法,不適當(dāng)?shù)嘏渲肏DFS服務(wù)器——主要是Hadoop安裝——將會泄露超過5PB的信息。John Matherly是用于發(fā)現(xiàn)互聯(lián)網(wǎng)設(shè)備的搜索引擎Shodan的創(chuàng)始人。

這位專家說,他發(fā)現(xiàn)了4487個HDFS服務(wù)器實例,這些服務(wù)器可通過公共IP地址獲得,而且不需要身份驗證。這些服務(wù)器總共泄露了超過5120TB的數(shù)據(jù)。

▲HDFS系統(tǒng)泄露地圖

據(jù)Matherly說,47820個MongoDB服務(wù)器只泄露了25 TB的數(shù)據(jù)。從這個角度來看,與MongoDB服務(wù)器相比,HDFS服務(wù)器泄露的數(shù)據(jù)要多200倍,而與此同時,MongoDB服務(wù)器的數(shù)量是后者的10倍。Binary Edge于2015年公布的一份報告顯示,在當(dāng)時,Redis、MongoDB、Memcached和ElasticSearch服務(wù)器的數(shù)據(jù)只泄露了1.1 PB的數(shù)據(jù)。

大多數(shù)HDFS系統(tǒng)位于美國和中國

泄露最多HDFS實例的國家是美國和中國,但這并不奇怪,因為這兩個國家擁有世界上超過50%的數(shù)據(jù)中心。

今年早些時候,攻擊者意識到他們可以接管為受保護的服務(wù)器,在網(wǎng)絡(luò)上泄露、竊取他們的內(nèi)容,請要求贖金。黑客攻擊首先針對的是MongoDB,但很快就轉(zhuǎn)移到了CouchDB和Hadoop。

最初的時候,有124個服務(wù)器遭受勒索,這個數(shù)字最近增長到了500個。根據(jù)Matherly的說法,仍然有207個基于hdfs的集群有贖金要求,不過我們不清楚這些是不是今年1月襲擊的遺留問題,還是現(xiàn)下仍然有服務(wù)器正被劫持。

HDFS支持Hadoop分布式文件系統(tǒng),這是一個可以在基于云的服務(wù)器上運行的分布式文件系統(tǒng)。它是Apache Hadoop的核心技術(shù),但它也部署了自定義解決方案。HDFS系統(tǒng)通常位于云托管環(huán)境中,用于存儲和處理大量的用戶數(shù)據(jù)。

Matherly已經(jīng)公布了他的研究的必要步驟。關(guān)于如何配置Hadoop服務(wù)器以在安全模式運行的說明,可以訪問此鏈接:http://hadoop.apache.org/docs/r2.8.0/hadoop-project-dist/hadoop-common/SecureMode.html

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2017-06-06
Hadoop服務(wù)器配置不當(dāng) 造成5PB數(shù)據(jù)泄露
根據(jù)John Matherly的說法,不適當(dāng)?shù)嘏渲肏DFS服務(wù)器——主要是Hadoop安裝——將會泄露超過5PB的信息。John Matherly是用于發(fā)現(xiàn)互聯(lián)網(wǎng)設(shè)備的搜索引擎Shodan的創(chuàng)始人。

長按掃碼 閱讀全文