撲朔迷離的云評(píng)估——至頂網(wǎng)云能力評(píng)估辦法公示

“雄兔腳撲朔,雌兔眼迷離;雙兔傍地走,安能辨我是雄雌?”木蘭辭的最后一句十分形象的對公有云主機(jī)的評(píng)測困難——對物理服務(wù)器而言,我們可以采用多種測試方法對其計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)的最大性能進(jìn)行測試,并對其結(jié)果進(jìn)行比較。但是對于一個(gè)正在運(yùn)行當(dāng)中的云計(jì)算系統(tǒng)而言,我們又應(yīng)該如何去分辨它的“雄雌”?

撲朔迷離的云評(píng)估——至頂網(wǎng)云能力評(píng)估辦法公示

對于云計(jì)算系統(tǒng)的網(wǎng)絡(luò)和網(wǎng)絡(luò)應(yīng)用測試,至頂網(wǎng)這兩年已經(jīng)積累了一些比較成功的測試經(jīng)驗(yàn)。但是對于云主機(jī)計(jì)算處理性能評(píng)估,還只能是摸著石頭過河。甚至某些同學(xué)認(rèn)為這根本就是多此一舉,性能不夠做一下擴(kuò)展就好,測試本就是多此一舉。最終我們云能力評(píng)估小組在刨根問底的精神指導(dǎo)下,充分溝通,達(dá)成共識(shí)。在對云主機(jī)WAN網(wǎng)Web應(yīng)用請求響應(yīng)測試的基礎(chǔ)上,嘗試對云主機(jī)的計(jì)算處理性能同樣進(jìn)行測試。

因此,本次至頂網(wǎng)公有云云主機(jī)的橫向?qū)Ρ葴y試,既是對公有云主機(jī)的一次評(píng)估,也是對云主機(jī)測試方法的一次摸底?,F(xiàn)在特地把本次云主機(jī)測試方案及評(píng)估辦法公示出來,希望可以起到一個(gè)拋磚引玉的做用,共同促進(jìn)公有云評(píng)估技術(shù)的進(jìn)步。

云主機(jī)計(jì)算性能測試——GeekBench

在以往服務(wù)器計(jì)算性能測試中,通常是采用Windows操作系統(tǒng)下的性能測試軟件,但是在公有云主機(jī)中,大多支持的是Linux操作系統(tǒng)。因此,選用一個(gè)可以跨平臺(tái),支持多種操作系統(tǒng)的測試工具就變得十分必要了。而且還要考慮搭建測試環(huán)境的便捷性,有些專業(yè)性的CPU測試工具雖然好,但測試環(huán)境的搭建復(fù)雜,耗時(shí)很長,如果出現(xiàn)舊版本測試沒跑完,新版本系統(tǒng)已上市的情況,哪就成了評(píng)測笑話了。因此,這樣的測試方法,再專業(yè)、再先進(jìn),我們肯定也不會(huì)去進(jìn)行考慮。最后是測試用例的代表性,可以體現(xiàn)出當(dāng)前比較主流的計(jì)算應(yīng)用性能。

基于上述通用性、便捷性、代表性的綜合考慮,我們云能力評(píng)估小組最終選定可以在Windows、Linux和安卓操作系統(tǒng)上使用的計(jì)算性能測試工具GeekBench3.4.2來完成本次公有云主機(jī)的整數(shù)和浮點(diǎn)計(jì)算性能測試工作。

(Geekbench是通過一系列數(shù)據(jù)加密、數(shù)據(jù)壓縮、圖像壓縮、圖形計(jì)算、腳本處理和路徑計(jì)算的方式,對CPU的整數(shù)類型計(jì)算能力進(jìn)行測試;并通過期權(quán)價(jià)格模似、圖像生成、銳化和模糊以及物理仿真、3D幾何場景描述等浮點(diǎn)計(jì)算功能對CPU的浮點(diǎn)計(jì)算能力進(jìn)行測試。并將各個(gè)測試結(jié)果綜合后,統(tǒng)一對CPU的整數(shù)計(jì)算和浮點(diǎn)計(jì)算能力進(jìn)行打分。)

Web應(yīng)用響應(yīng)測試——聽云

GeekBench的測試項(xiàng)目雖多,但缺少對網(wǎng)頁處理能力的測試。而Web應(yīng)用響應(yīng)能力,是我們運(yùn)維同學(xué)最關(guān)注的測試項(xiàng)目。因此所選用的測試工具,也是充滿著運(yùn)維色彩的聽云。為什么要用一個(gè)APM(應(yīng)用性能管理)軟件來進(jìn)行Web應(yīng)用測試?主要是因?yàn)楝F(xiàn)實(shí)網(wǎng)絡(luò)環(huán)境測試和實(shí)驗(yàn)室環(huán)境測試有著很大的不同。在實(shí)驗(yàn)室環(huán)境中,我們要考驗(yàn)的是設(shè)備的極限承受能力。在這種測試中,有很大幾率會(huì)造成破壞性后果。但是在現(xiàn)實(shí)網(wǎng)絡(luò)應(yīng)用環(huán)境中是很難對這種破壞性后果進(jìn)行承受的。因此,在現(xiàn)實(shí)網(wǎng)絡(luò)環(huán)境測試中,必須注意以下幾點(diǎn):

1、不能對現(xiàn)實(shí)網(wǎng)絡(luò)中正在運(yùn)營的業(yè)務(wù)產(chǎn)生過高的影響。

2、測試數(shù)據(jù)的采集點(diǎn)要盡量部署全面,以便于全方位的對網(wǎng)絡(luò)傳輸信息進(jìn)行收集。

3、測試數(shù)據(jù)的精度越高,結(jié)果越詳細(xì),可以分析出潛在問題的可能性就會(huì)越大。

從上述幾點(diǎn)來分析,作為一款A(yù)PM軟件,聽云本身對現(xiàn)實(shí)網(wǎng)絡(luò)環(huán)境所造成影響較小(基本可以忽略不記)。發(fā)出的應(yīng)用請求流量可以進(jìn)行控制,便于對測試強(qiáng)度進(jìn)行靈活掌控。最主要的是聽云的監(jiān)控點(diǎn)遍布全國各地,可以很好的對云主機(jī)全國范圍內(nèi)應(yīng)用響應(yīng)能力進(jìn)行評(píng)估。至于數(shù)所采集的精度和細(xì)粒度,則需要在測試后,通過測試結(jié)果再進(jìn)一步進(jìn)行分析。

云計(jì)算系統(tǒng)平臺(tái)應(yīng)用體驗(yàn)——樂樂

云計(jì)算系統(tǒng),不是一個(gè)簡單的Web Server的服務(wù)器,而是為用戶提供業(yè)務(wù)應(yīng)用處理能力的平臺(tái)。用戶的應(yīng)用流量是否可以平滑接入,有效分配到各個(gè)云主機(jī)上進(jìn)行業(yè)務(wù)應(yīng)用處理;業(yè)務(wù)數(shù)據(jù)可否快捷高效的進(jìn)行調(diào)用;還有域名備份、問題溝通、平臺(tái)使用的難易度等等。要想搞清這些問題,就需要一一對不同的公有云平臺(tái)進(jìn)行實(shí)際使用的體驗(yàn)。

為此,我們的運(yùn)維專家樂樂同學(xué)勇敢的承擔(dān)了這項(xiàng)任務(wù),從實(shí)際應(yīng)用的角度出發(fā),對不同云計(jì)算系統(tǒng)平臺(tái)分別進(jìn)行體驗(yàn),并一一進(jìn)行評(píng)價(jià)。只有通過實(shí)際的應(yīng)用才能產(chǎn)生最直觀的體現(xiàn)。這也是樂樂同學(xué)在百忙的工作之中,一定要抽出時(shí)間進(jìn)行這項(xiàng)測試的一個(gè)最主要原因。希望通過我們絕對可以稱得上是一線技術(shù)專家的體驗(yàn)測試,能向大家提供出一份絕對實(shí)用的應(yīng)用體驗(yàn)資料。

梳理云評(píng)估辦法,讓云計(jì)算有理可依

計(jì)算性能、Web應(yīng)用響應(yīng)和系統(tǒng)平臺(tái)應(yīng)用體驗(yàn),是云能力評(píng)估小組在公有云技術(shù)評(píng)估道路上的又一次嘗試。云計(jì)算從誕生到現(xiàn)在,已經(jīng)經(jīng)歷了十多年的技術(shù)發(fā)展,然而可以公開的評(píng)估指標(biāo)和規(guī)范,卻始終是鳳毛麟角。梳理出一套切實(shí)可用,真正對用戶有指導(dǎo)意義的云計(jì)算評(píng)估辦法,是至頂網(wǎng)云能力評(píng)估小組當(dāng)前最熱切的追求。

但是也不能為了評(píng)測而評(píng)測,還需要對測試結(jié)果進(jìn)行更加深入的分析。云是一個(gè)具有高度靈活性的產(chǎn)品,公有云廠商產(chǎn)品為什么會(huì)有這樣的技術(shù)指標(biāo)設(shè)計(jì),需要在測試中深入挖掘。不但要有測試的方法,還要能講明測試的道理,這樣才可以更加全面的去進(jìn)行評(píng)估。

由于時(shí)間和精力有限,本次公有云主機(jī)評(píng)測我們只選擇了十家當(dāng)前比較主流的國內(nèi)外公有云廠商產(chǎn)品進(jìn)行測試。它們分別是AWS、Azure、阿里云、百度云、華為云、金山云、京東云、青云、騰訊云以及UCloud(廠商排名不分先后)。接下來我們將對這些公有云主機(jī)測試結(jié)果一一進(jìn)行分析,并逐一呈現(xiàn)給廣大用戶。希望通過這次公有云主機(jī)評(píng)估辦法的梳理,可以讓云計(jì)算更加有理可依,讓用戶可以更有針對性的對云主機(jī)加以選擇。

——————————————————

頂網(wǎng)云能力評(píng)估小組是以至頂網(wǎng)技術(shù)部為主導(dǎo),評(píng)測實(shí)驗(yàn)室為輔助的第三方媒體評(píng)測機(jī)構(gòu)。云能力評(píng)估小組力求從用戶實(shí)際應(yīng)用需求維度出發(fā),以客觀、公正、真實(shí)、開放的態(tài)度,對當(dāng)前云計(jì)算產(chǎn)品、技術(shù)及應(yīng)用進(jìn)行測試、評(píng)估和分析。以實(shí)際產(chǎn)品應(yīng)用能力為基準(zhǔn),站在第三方的立場上,對當(dāng)前最新云計(jì)算及相關(guān)技術(shù),進(jìn)行客觀、公平、公正的評(píng)論,并將測試方法、測試結(jié)果和結(jié)論公開對外展示。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2018-08-20
撲朔迷離的云評(píng)估——至頂網(wǎng)云能力評(píng)估辦法公示
“雄兔腳撲朔,雌兔眼迷離;雙兔傍地走,安能辨我是雄雌?”木蘭辭的最后一句十分形象的對公有云主機(jī)的評(píng)測困難——對于一個(gè)正在運(yùn)行當(dāng)中的云計(jì)算系統(tǒng)而言,我們又應(yīng)該如何去分辨它的“雄雌”?

長按掃碼 閱讀全文