• 正文
    • 01.斬獲IO500冠軍 曙光存儲(chǔ)刷新世界紀(jì)錄
    • 02.角逐智能化存儲(chǔ)市場(chǎng)得自研者得天下
    • 03.落地自動(dòng)駕駛解決“最后一公里”問題
    • 04.結(jié)語:自研存儲(chǔ)已有突破仍需堅(jiān)持長期主義
  • 相關(guān)推薦
申請(qǐng)入駐 產(chǎn)業(yè)圖譜

刷新世界紀(jì)錄146%!手握獨(dú)家自研利器,曙光殺入全球存儲(chǔ)性能榜首

2022/11/25
1489
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點(diǎn)資訊討論

作者 |  夏舍予

編輯 |  漠影

曙光存儲(chǔ)獲IO500榜首,國內(nèi)自研技術(shù)更進(jìn)一步。

隨著數(shù)字化建設(shè)的開展,我國的各個(gè)行業(yè)都在向數(shù)字化和智能化轉(zhuǎn)型。在行業(yè)轉(zhuǎn)型的過程中,大量新技術(shù)不斷涌現(xiàn),例如物聯(lián)網(wǎng)5G、云計(jì)算、AI大數(shù)據(jù)等。技術(shù)的進(jìn)步加快了數(shù)據(jù)的產(chǎn)生和流動(dòng),這也造成了數(shù)據(jù)的爆發(fā)式增長。

算力需求的驅(qū)動(dòng)下,全國已有二十多個(gè)城市搶建數(shù)據(jù)中心,各大廠商也在算力領(lǐng)域開始“卷”了起來。

但除了計(jì)算能力,數(shù)據(jù)處理還有一個(gè)重要的維度,那就是存儲(chǔ)。如果計(jì)算能力很強(qiáng),但是存儲(chǔ)性能跟不上,整體的計(jì)算效率也無法得到有效提升。

在全球范圍內(nèi),有一個(gè)存儲(chǔ)性能評(píng)測(cè)最權(quán)威的國際排行榜——IO500。歷屆冠軍包括英特爾和DDN等,它們都是業(yè)內(nèi)具有多年存儲(chǔ)核心技術(shù)積累和創(chuàng)新能力的國際一流廠商。

今年,中科曙光獲得了IO500的10節(jié)點(diǎn)榜單冠軍,并且將世界紀(jì)錄提升了146%,這標(biāo)志著我國自研存儲(chǔ)力量已經(jīng)躋身世界一流陣營。

▲IO500榜單是存儲(chǔ)性能領(lǐng)域的權(quán)威榜單

 

本次IO500全球最新榜單角逐情況如何?存儲(chǔ)性能的新紀(jì)錄如何影響行業(yè)數(shù)字化轉(zhuǎn)型?自研存儲(chǔ)企業(yè)又是如何在全球科技巨頭云集的市場(chǎng)中實(shí)現(xiàn)突圍的?為此,智東西與曙光存儲(chǔ)行業(yè)推廣總監(jiān)李國君進(jìn)行了深度對(duì)話。

01.斬獲IO500冠軍 曙光存儲(chǔ)刷新世界紀(jì)錄

本次登上IO500榜首的是曙光ParaStor分布式統(tǒng)一存儲(chǔ)系統(tǒng)。曙光ParaStor誕生于2009年,已有十余年的技術(shù)積累。李國君告訴智東西,ParaStor的發(fā)展可分為四個(gè)不同階段。

 

1.0階段,曙光ParaStor主要支持POSIX高性能文件協(xié)議,面向高端計(jì)算應(yīng)用場(chǎng)景。

2.0階段,隨著行業(yè)應(yīng)用發(fā)展,曙光升級(jí)為對(duì)NAS和對(duì)象協(xié)議的支持,產(chǎn)品面向多領(lǐng)域規(guī)?;渴?。

3.0階段,隨著虛擬化和云計(jì)算技術(shù)的普及,曙光開始發(fā)力分布式塊存儲(chǔ)市場(chǎng),完善了塊的協(xié)議,解決用戶上云需求。

4.0階段,隨著各行業(yè)智能化與數(shù)字化轉(zhuǎn)型,應(yīng)用變得更加多樣,曙光ParaStor實(shí)現(xiàn)了對(duì)文件、塊、對(duì)象以及HDFS協(xié)議的完全支持,幾乎可以覆蓋所有的應(yīng)用場(chǎng)景。

在每個(gè)發(fā)展階段,曙光ParaStor都根據(jù)業(yè)務(wù)需求特點(diǎn)對(duì)產(chǎn)品進(jìn)行創(chuàng)新升級(jí)。比如從多協(xié)議融合、全閃性能優(yōu)化到綠色節(jié)能技術(shù),李國君說,曙光ParaStor最大的優(yōu)勢(shì)就是全棧自研技術(shù)。 

再來看看國際權(quán)威的存儲(chǔ)性能測(cè)試榜單——IO500榜單,它主要包括“全榜單”“10節(jié)點(diǎn)榜單”。相比全榜單可以充分利用不限客戶端規(guī)模的優(yōu)勢(shì),10節(jié)點(diǎn)榜單將客戶端數(shù)量嚴(yán)格限制在10個(gè)節(jié)點(diǎn),是對(duì)存儲(chǔ)系統(tǒng)全棧技術(shù)研制、優(yōu)化和創(chuàng)新能力的更高難度挑戰(zhàn)。

IO500榜單不僅只是一個(gè)榜單,其背后有三重價(jià)值。

第一,對(duì)于行業(yè)玩家而言,它是業(yè)內(nèi)存儲(chǔ)性能測(cè)量的權(quán)威平臺(tái)。

第二,對(duì)于產(chǎn)業(yè)而言,它推動(dòng)數(shù)據(jù)中心逐漸從“計(jì)算密集型”向“數(shù)據(jù)密集型”演進(jìn),從存儲(chǔ)系統(tǒng)層面提升數(shù)字使用效率,可以助力數(shù)字經(jīng)濟(jì)發(fā)展。

第三,對(duì)于應(yīng)用行業(yè)客戶而言,它具有實(shí)際參考意義。無論是對(duì)傳統(tǒng)的高密度計(jì)算場(chǎng)景,還是新興的數(shù)據(jù)分析等HPDA場(chǎng)景,IO500混合IO模型負(fù)載的評(píng)測(cè),都可以為客戶提供參考價(jià)值。

而曙光ParaStor獲得10節(jié)點(diǎn)榜單的冠軍,也可以說證明了國內(nèi)自研存儲(chǔ)廠商的技術(shù)已經(jīng)比肩甚至超過國際巨頭。

02.角逐智能化存儲(chǔ)市場(chǎng)得自研者得天下

據(jù)IT市場(chǎng)研究和咨詢公司IDC的數(shù)據(jù),2021年我國存儲(chǔ)市場(chǎng)規(guī)模達(dá)到59億美元(約423億人民幣),比2020年市場(chǎng)規(guī)模增長18%,預(yù)計(jì)未來5年存儲(chǔ)市場(chǎng)將以12.6%的年復(fù)合增長率持續(xù)保持上升趨勢(shì)。

相比于整個(gè)存儲(chǔ)市場(chǎng),分布式存儲(chǔ)市場(chǎng)的增長潛力更為突出。中國信通院的數(shù)據(jù)顯示,2021年分布式存儲(chǔ)的市場(chǎng)規(guī)模達(dá)到178億元,并預(yù)計(jì)將在未來三年以40%的增長率持續(xù)擴(kuò)大。

曙光存儲(chǔ)行業(yè)推廣總監(jiān)李國君

李國君談道,縱觀國內(nèi)的整個(gè)存儲(chǔ)行業(yè),業(yè)內(nèi)玩家已經(jīng)分成了多個(gè)梯隊(duì)。第一梯隊(duì)是掌握了自研技術(shù)的存儲(chǔ)廠家,中科曙光已成為其中的代表。

第一梯隊(duì)的玩家不僅有核心軟件研發(fā)能力,還有硬件制造能力,可以實(shí)現(xiàn)軟硬協(xié)同一體化。由于技術(shù)是自研的,這些廠家不必過多依賴外部的開源組件,能夠自主進(jìn)行產(chǎn)品的持續(xù)迭代,引領(lǐng)行業(yè)的發(fā)展方向。

那么聚焦曙光,公司又如何在群雄割據(jù)的第一梯隊(duì)中沖出重圍呢?

李國君談道,中科曙光主要從自研技術(shù)積累、超大規(guī)模部署實(shí)踐、技術(shù)服務(wù)支撐能力三個(gè)方面打造自身的差異化優(yōu)勢(shì)。

首先,曙光有專業(yè)的自研技術(shù)優(yōu)勢(shì)。曙光ParaStor已經(jīng)有十余年的研發(fā)歷史,曙光團(tuán)隊(duì)從0到1做自研技術(shù),至今已經(jīng)積累了三百余項(xiàng)專利,存儲(chǔ)產(chǎn)品在性能指標(biāo)上優(yōu)于別的廠家。

其次,曙光還有豐富的超大規(guī)模分布式存儲(chǔ)部署實(shí)踐,曙光ParaStor單套系統(tǒng)的存儲(chǔ)容量可達(dá)300PB。

最后,曙光具備技術(shù)服務(wù)支撐能。曙光擁有完善的本地化技術(shù)支持團(tuán)隊(duì),具備定制化設(shè)計(jì)、開發(fā)與落地能力。

可以預(yù)測(cè),隨著數(shù)字信息化的推進(jìn),存儲(chǔ)領(lǐng)域?qū)@技術(shù)與產(chǎn)業(yè)落地開啟新的角逐,技術(shù)積累、商業(yè)應(yīng)用規(guī)模、服務(wù)支撐能力都將成為角逐的主戰(zhàn)場(chǎng)。

03.落地自動(dòng)駕駛解決“最后一公里”問題

隨著各行各業(yè)的數(shù)字化轉(zhuǎn)型推進(jìn),存儲(chǔ)也正面臨著新的時(shí)代需求。李國君告訴智東西,目前市場(chǎng)對(duì)分布式存儲(chǔ)的需求主要集中在四個(gè)層面:

第一,大規(guī)模存儲(chǔ)需。隨著數(shù)據(jù)海量增長,數(shù)據(jù)的規(guī)模越來越大,這對(duì)數(shù)據(jù)存儲(chǔ)系統(tǒng)的技術(shù)難度提出了更高的要求。

第二,性能優(yōu)化需求。性能決定了存儲(chǔ)好不好用,數(shù)據(jù)的讀取速度決定人工智能等核心應(yīng)用的生產(chǎn)效率。所以分布式存儲(chǔ)不僅要裝得下大規(guī)模的數(shù)據(jù),還要提升讀取數(shù)據(jù)的速度,極致優(yōu)化性能。

第三,數(shù)據(jù)安全需求。數(shù)據(jù)安全需求分為兩個(gè)方面,一方面是數(shù)據(jù)本身的存儲(chǔ)安全,廠家要保證數(shù)據(jù)不丟失、不被非法篡改。另一方面是技術(shù)安全,廠家是否有自己的核心專利和自研技術(shù),在軟件和硬件上能否不受制約。

第四,綠色節(jié)能需求。在整個(gè)新基建中,綠色經(jīng)濟(jì)都是很重要的一個(gè)部分。廠家要保證數(shù)據(jù)中心的能耗降到最低水平,緩解碳排放的壓力。

但是具體到不同的行業(yè),需求也有側(cè)重。讓我們以采集數(shù)據(jù)最多,對(duì)技術(shù)要求也最苛刻的自動(dòng)駕駛為例。

自動(dòng)駕駛領(lǐng)域的特點(diǎn)就是數(shù)據(jù)采集量大,訓(xùn)練模型豐富且差異化較大,不同階段數(shù)據(jù)的IO模型讀取的順序也不一樣。對(duì)于這些問題,曙光ParaStor采用的POSIX協(xié)議可以支持上萬個(gè)應(yīng)用節(jié)點(diǎn)級(jí)別的云容器平臺(tái),同時(shí)搭配多級(jí)智能緩存加速策略,最大化提升自動(dòng)駕駛模型訓(xùn)練和模擬仿真的效率。

此外,數(shù)據(jù)安全在自動(dòng)駕駛領(lǐng)域也非常重要。因?yàn)檐囕v采集的數(shù)據(jù)涉及到國家經(jīng)濟(jì)、地理信息、用戶信息等隱私數(shù)據(jù),所以保護(hù)數(shù)據(jù)的安全十分必要。李國君提到,曙光通過精細(xì)化的權(quán)限控制,支持多因子認(rèn)證、WORM、快照及回收站,保障數(shù)據(jù)存取安全和訪問合規(guī)。曙光可以提供從軟件到硬件全自主、全流程可控的存儲(chǔ)方案,全力保障數(shù)據(jù)存儲(chǔ)安全。

同樣,數(shù)據(jù)量大還會(huì)帶來另外的問題,那就是硬盤、網(wǎng)絡(luò)等組件發(fā)生故障的概率增加,這就涉及到運(yùn)維的部分。李國君說,曙光有一套嚴(yán)密的監(jiān)控管理方案,可以及時(shí)監(jiān)測(cè)出故障組件,發(fā)出告警通知并自動(dòng)化修復(fù)。

總的來說,在自動(dòng)駕駛領(lǐng)域,曙光ParaStor主要從性能、安全、運(yùn)維三個(gè)方面構(gòu)建自身的獨(dú)特競爭力。

04.結(jié)語:自研存儲(chǔ)已有突破仍需堅(jiān)持長期主義

曙光ParaStor斬獲IO500榜首,證明國內(nèi)自研存儲(chǔ)力量已經(jīng)獲得了巨大的進(jìn)展和突破,開始在國際舞臺(tái)上嶄露頭角。

但是,目前整個(gè)存儲(chǔ)行業(yè)仍然面臨著非結(jié)構(gòu)化數(shù)據(jù)爆發(fā)式增長、極致性能待優(yōu)化、技術(shù)不夠綠色節(jié)能等挑戰(zhàn)。

經(jīng)過多年深耕技術(shù),曙光已經(jīng)在這些方面有所成效,解決了部分難題。但對(duì)于整個(gè)行業(yè)中的企業(yè)而言,它們?cè)撊绾蚊鎸?duì)這些挑戰(zhàn)?

一方面,企業(yè)要預(yù)判行業(yè)發(fā)展,為未來的存儲(chǔ)需求提前做好技術(shù)儲(chǔ)備。另一方面,企業(yè)也需要沉下心來踏實(shí)做技術(shù)研發(fā),不斷投入時(shí)間成本,堅(jiān)持長期主義。

中科曙光

中科曙光

中科曙光(sugon)是中國信息產(chǎn)業(yè)領(lǐng)軍企業(yè),為中國及全球用戶提供創(chuàng)新、高效、可靠的IT產(chǎn)品、解決方案及服務(wù)。

中科曙光(sugon)是中國信息產(chǎn)業(yè)領(lǐng)軍企業(yè),為中國及全球用戶提供創(chuàng)新、高效、可靠的IT產(chǎn)品、解決方案及服務(wù)。收起

查看更多

相關(guān)推薦