6月18日,在德國法蘭克福舉行的國際超算大會(ISC2019)上,組織者公布了最新一期的IO500存儲系統(tǒng)性能排名,焱融云成為中國初創(chuàng)企業(yè)中唯一入選榜單的公司,在全球的Storage Vendor(存儲供應(yīng)商)中排名第八,比肩DDN、Dell EMC、WekaIO、IBM、NetApp、浪潮等一線廠商。
IO500
高性能計算領(lǐng)域,基礎(chǔ)架構(gòu)設(shè)施由超級計算機及高性能存儲及網(wǎng)絡(luò)組成。在每年的國際超算大會(ISC)上,公布超級計算機的性能排名,即近日大家熱議的Top500榜單。同樣地,在ISC大會上還會公布IO500榜單,IO500是針對存儲系統(tǒng)性能的排名表。這兩個榜單,標(biāo)志著相關(guān)研究機構(gòu)及企業(yè),在高性能計算和存儲領(lǐng)域的技術(shù)實力和產(chǎn)品水平。
高性能存儲系統(tǒng)的基準(zhǔn)性能測試是一項復(fù)雜的任務(wù),并行I/O不僅受CPU延遲性能和網(wǎng)絡(luò)的影響,還受底層存儲技術(shù)和軟件的影響。不同廠商發(fā)布的性能測試結(jié)果,往往由于測試方法、工具、參數(shù)甚至測試步驟的先后順序不同,而具有較大的差異性。IO500定義了一個全面的基準(zhǔn)性能測試套件,可以對高性能存儲系統(tǒng)進(jìn)行標(biāo)準(zhǔn)的測試和比較,旨在為用戶提供一個標(biāo)準(zhǔn)的評價依據(jù)。
與計算體系結(jié)構(gòu)的Top500列表類似,IO500不僅提供評價存儲系統(tǒng)性能的關(guān)鍵指標(biāo),還將作為在業(yè)界促進(jìn)和共享最佳實踐的資料庫。
從測試方法上,IO500進(jìn)行兩組測試,分別完成以下場景的測試:
理想狀況下,存儲系統(tǒng)的最優(yōu)性能(例如大文件讀寫),這組測試可以充分發(fā)揮存儲廠商在性能調(diào)優(yōu)上的主動性。測試包括:
- IO Easy:write/read
- MDTest Easy: create/stat/delete
IO500專門設(shè)置了一組苛刻的測試流程(如隨機讀寫3901 Byte數(shù)據(jù)),以及海量小文件的讀寫,以此來評估存儲系統(tǒng)在極端場景下的性能底線。測試包括:
- IO Hard:write/read
- MDTest Hard:create/stat/read/delete
- Find索引
最終,通過IOPS和帶寬的測試數(shù)據(jù),計算出整個存儲系統(tǒng)的性能評分。
IO500的測試基準(zhǔn),從設(shè)計之初,就設(shè)立了以下目標(biāo):
代表性:IO500的測試基準(zhǔn)應(yīng)該代表在真實系統(tǒng)上觀察到的典型工作負(fù)載。這包括可調(diào)優(yōu)和優(yōu)化的工作負(fù)載,也包括交互的、原始的及不可優(yōu)化的工作負(fù)載。IO500利用IOR、MDTEST和標(biāo)準(zhǔn)POSIX來對可優(yōu)化的順序IO、隨機IO以及元數(shù)據(jù)操作等類型的工作負(fù)載進(jìn)行性能評估。
易理解:IO500將生成有意義的度量和評價體系。測試指標(biāo)對數(shù)據(jù)中心用戶來說是有意義的。盡量將測試偏差降低(即減少測試步驟差異帶來的影響),盡可能使重復(fù)測試可獲得相近的結(jié)果。對于每個單獨的性能運行,IO500使用以GiB/s和kIOPS為單位進(jìn)行統(tǒng)計。除了綜合得分之外,還保留了個別值,以方便進(jìn)行更細(xì)致的評估。
可擴展性:可以在任意規(guī)模的大型計算機及存儲系統(tǒng)上運行,并根據(jù)使用的客戶端/服務(wù)器端節(jié)點數(shù)量和每個節(jié)點的進(jìn)程來評估測試結(jié)果。
可移植:基準(zhǔn)測試應(yīng)該涵蓋各種存儲技術(shù)和非POSIX API。提供不同版本的軟件包和工具,減少用戶在不同平臺上進(jìn)行測試的時間投入,使測試盡可能流暢地進(jìn)行。
權(quán)威性:IO500旨在提供可信賴的基準(zhǔn)性能測試結(jié)果,并且防止(無意中)作弊。向IO500提交的報告中,要求披露結(jié)果提供者所做的性能優(yōu)化參數(shù)。這些參數(shù)將作為結(jié)果的一部分與業(yè)界進(jìn)行分享,讓其他人通過調(diào)整有用的選項來進(jìn)一步理解測試。
IO500由存儲業(yè)界的國際知名廠商代表和學(xué)者組成委員會,公平接受全球廠商、研究機構(gòu)提供的存儲系統(tǒng)性能測試數(shù)據(jù),并對結(jié)果進(jìn)行發(fā)布,IO500排名已成為高性能存儲領(lǐng)域及其重要的評價指標(biāo)。
YRCloudFile
YRCloudFile是焱融云推出的高性能分布式存儲,此次參與的是IO500 10節(jié)點測試。IO500 10節(jié)點測試將基準(zhǔn)性能測試限制為10個節(jié)點,評估在10節(jié)點上系統(tǒng)發(fā)揮出的最佳性能。這樣的集群規(guī)模十分貼近于大多數(shù)的中小規(guī)模應(yīng)用場景,其測試數(shù)據(jù)對客戶而言也非常具有參考和借鑒意義,YRCloudFile在這樣的規(guī)模下對集群的優(yōu)化也可以為大量用戶提供最佳實踐。
焱融云YRCloudFile通過支持RDMA、NVMe等新型高性能設(shè)備和技術(shù),以及高效的讀寫引擎,降低了數(shù)據(jù)在讀寫過程中的開銷,可擴展的元數(shù)據(jù)集群有效應(yīng)對海量文件場景下系統(tǒng)對元數(shù)據(jù)操作的壓力(MDTest Hard)。使YRCloudFile在及其有限的硬件配置環(huán)境下,依然發(fā)揮出優(yōu)異的性能,獲得理想的性能基準(zhǔn)測試結(jié)果。
YRCloudFile所提供的高性能存儲對人工智能(AI)、大規(guī)模仿真(Simulation)、電子設(shè)計自動化(EDA)、生命工程(Life Science)、資源勘探等應(yīng)用領(lǐng)域至關(guān)重要。
除了高性能訪問的能力外,YRCloudFile還提供了友好的數(shù)據(jù)治理功能,幫助用戶快速定位系統(tǒng)熱點(FileSystem Hot Spot),系統(tǒng)數(shù)據(jù)分析(FileSystem Insight)等功能,使管理員能更好掌控存儲集群并進(jìn)行相應(yīng)調(diào)整。
在未來,焱融云還將繼續(xù)在YRCloudFile的性能優(yōu)化上投入更多資源,進(jìn)一步提升和優(yōu)化性能指標(biāo),為人工智能等眾多新興場景提供一流的數(shù)據(jù)管理支持。
- 蜜度索驥:以跨模態(tài)檢索技術(shù)助力“企宣”向上生長
- 為什么年輕人不愛換手機了
- 柔宇科技未履行金額近億元被曝已6個月發(fā)不出工資
- 柔宇科技被曝已6個月發(fā)不出工資 公司回應(yīng)欠薪有補償方案
- 第六座“綠動未來”環(huán)保公益圖書館落地貴州山區(qū)小學(xué)
- 窺見“新紀(jì)元”,2021元宇宙產(chǎn)業(yè)發(fā)展高峰論壇“廣州啟幕”
- 以人為本,景悅科技解讀智慧城市發(fā)展新理念
- 紐迪瑞科技/NDT賦能黑鯊4 Pro游戲手機打造全新一代屏幕壓感
- 清潔家電新老玩家市場定位清晰,攜手共進(jìn),核心技術(shù)決定未來
- 新思科技與芯耀輝在IP產(chǎn)品領(lǐng)域達(dá)成戰(zhàn)略合作伙伴關(guān)系
- 芯耀輝加速全球化部署,任命原Intel高管出任全球總裁
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。