作者 | 夏舍予
編輯 | 漠影
曙光存儲獲IO500榜首,國內(nèi)自研技術更進一步。
隨著數(shù)字化建設的開展,我國的各個行業(yè)都在向數(shù)字化和智能化轉型。在行業(yè)轉型的過程中,大量新技術不斷涌現(xiàn),例如物聯(lián)網(wǎng)、5G、云計算、AI、大數(shù)據(jù)等。技術的進步加快了數(shù)據(jù)的產(chǎn)生和流動,這也造成了數(shù)據(jù)的爆發(fā)式增長。
在算力需求的驅動下,全國已有二十多個城市搶建數(shù)據(jù)中心,各大廠商也在算力領域開始“卷”了起來。
但除了計算能力,數(shù)據(jù)處理還有一個重要的維度,那就是存儲。如果計算能力很強,但是存儲性能跟不上,整體的計算效率也無法得到有效提升。
在全球范圍內(nèi),有一個存儲性能評測最權威的國際排行榜——IO500。歷屆冠軍包括英特爾和DDN等,它們都是業(yè)內(nèi)具有多年存儲核心技術積累和創(chuàng)新能力的國際一流廠商。
今年,中科曙光獲得了IO500的10節(jié)點榜單冠軍,并且將世界紀錄提升了146%,這標志著我國自研存儲力量已經(jīng)躋身世界一流陣營。
▲IO500榜單是存儲性能領域的權威榜單
本次IO500全球最新榜單角逐情況如何?存儲性能的新紀錄如何影響行業(yè)數(shù)字化轉型?自研存儲企業(yè)又是如何在全球科技巨頭云集的市場中實現(xiàn)突圍的?為此,智東西與曙光存儲行業(yè)推廣總監(jiān)李國君進行了深度對話。
01.斬獲IO500冠軍 曙光存儲刷新世界紀錄
1.0階段,曙光ParaStor主要支持POSIX高性能文件協(xié)議,面向高端計算應用場景。
2.0階段,隨著行業(yè)應用發(fā)展,曙光升級為對NAS和對象協(xié)議的支持,產(chǎn)品面向多領域規(guī)模化部署。
3.0階段,隨著虛擬化和云計算技術的普及,曙光開始發(fā)力分布式塊存儲市場,完善了塊的協(xié)議,解決用戶上云需求。
4.0階段,隨著各行業(yè)智能化與數(shù)字化轉型,應用變得更加多樣,曙光ParaStor實現(xiàn)了對文件、塊、對象以及HDFS協(xié)議的完全支持,幾乎可以覆蓋所有的應用場景。
在每個發(fā)展階段,曙光ParaStor都根據(jù)業(yè)務需求特點對產(chǎn)品進行創(chuàng)新升級。比如從多協(xié)議融合、全閃性能優(yōu)化到綠色節(jié)能技術,李國君說,曙光ParaStor最大的優(yōu)勢就是全棧自研技術。
再來看看國際權威的存儲性能測試榜單——IO500榜單,它主要包括“全榜單”和“10節(jié)點榜單”。相比全榜單可以充分利用不限客戶端規(guī)模的優(yōu)勢,10節(jié)點榜單將客戶端數(shù)量嚴格限制在10個節(jié)點,是對存儲系統(tǒng)全棧技術研制、優(yōu)化和創(chuàng)新能力的更高難度挑戰(zhàn)。
IO500榜單不僅只是一個榜單,其背后有三重價值。
第一,對于行業(yè)玩家而言,它是業(yè)內(nèi)存儲性能測量的權威平臺。
第二,對于產(chǎn)業(yè)而言,它推動數(shù)據(jù)中心逐漸從“計算密集型”向“數(shù)據(jù)密集型”演進,從存儲系統(tǒng)層面提升數(shù)字使用效率,可以助力數(shù)字經(jīng)濟發(fā)展。
第三,對于應用行業(yè)客戶而言,它具有實際參考意義。無論是對傳統(tǒng)的高密度計算場景,還是新興的數(shù)據(jù)分析等HPDA場景,IO500混合IO模型負載的評測,都可以為客戶提供參考價值。
而曙光ParaStor獲得10節(jié)點榜單的冠軍,也可以說證明了國內(nèi)自研存儲廠商的技術已經(jīng)比肩甚至超過國際巨頭。
02.角逐智能化存儲市場得自研者得天下
據(jù)IT市場研究和咨詢公司IDC的數(shù)據(jù),2021年我國存儲市場規(guī)模達到59億美元(約423億人民幣),比2020年市場規(guī)模增長18%,預計未來5年存儲市場將以12.6%的年復合增長率持續(xù)保持上升趨勢。
相比于整個存儲市場,分布式存儲市場的增長潛力更為突出。中國信通院的數(shù)據(jù)顯示,2021年分布式存儲的市場規(guī)模達到178億元,并預計將在未來三年以40%的增長率持續(xù)擴大。
▲曙光存儲行業(yè)推廣總監(jiān)李國君
李國君談道,縱觀國內(nèi)的整個存儲行業(yè),業(yè)內(nèi)玩家已經(jīng)分成了多個梯隊。第一梯隊是掌握了自研技術的存儲廠家,中科曙光已成為其中的代表。
第一梯隊的玩家不僅有核心軟件研發(fā)能力,還有硬件制造能力,可以實現(xiàn)軟硬協(xié)同一體化。由于技術是自研的,這些廠家不必過多依賴外部的開源組件,能夠自主進行產(chǎn)品的持續(xù)迭代,引領行業(yè)的發(fā)展方向。
那么聚焦曙光,公司又如何在群雄割據(jù)的第一梯隊中沖出重圍呢?
李國君談道,中科曙光主要從自研技術積累、超大規(guī)模部署實踐、技術服務支撐能力三個方面打造自身的差異化優(yōu)勢。
首先,曙光有專業(yè)的自研技術優(yōu)勢。曙光ParaStor已經(jīng)有十余年的研發(fā)歷史,曙光團隊從0到1做自研技術,至今已經(jīng)積累了三百余項專利,存儲產(chǎn)品在性能指標上優(yōu)于別的廠家。
其次,曙光還有豐富的超大規(guī)模分布式存儲部署實踐,曙光ParaStor單套系統(tǒng)的存儲容量可達300PB。
最后,曙光具備技術服務支撐能力。曙光擁有完善的本地化技術支持團隊,具備定制化設計、開發(fā)與落地能力。
可以預測,隨著數(shù)字信息化的推進,存儲領域將圍繞技術與產(chǎn)業(yè)落地開啟新的角逐,技術積累、商業(yè)應用規(guī)模、服務支撐能力都將成為角逐的主戰(zhàn)場。
03.落地自動駕駛解決“最后一公里”問題
隨著各行各業(yè)的數(shù)字化轉型推進,存儲也正面臨著新的時代需求。李國君告訴智東西,目前市場對分布式存儲的需求主要集中在四個層面:
第一,大規(guī)模存儲需求。隨著數(shù)據(jù)海量增長,數(shù)據(jù)的規(guī)模越來越大,這對數(shù)據(jù)存儲系統(tǒng)的技術難度提出了更高的要求。
第二,性能優(yōu)化需求。性能決定了存儲好不好用,數(shù)據(jù)的讀取速度決定人工智能等核心應用的生產(chǎn)效率。所以分布式存儲不僅要裝得下大規(guī)模的數(shù)據(jù),還要提升讀取數(shù)據(jù)的速度,極致優(yōu)化性能。
第三,數(shù)據(jù)安全需求。數(shù)據(jù)安全需求分為兩個方面,一方面是數(shù)據(jù)本身的存儲安全,廠家要保證數(shù)據(jù)不丟失、不被非法篡改。另一方面是技術安全,廠家是否有自己的核心專利和自研技術,在軟件和硬件上能否不受制約。
第四,綠色節(jié)能需求。在整個新基建中,綠色經(jīng)濟都是很重要的一個部分。廠家要保證數(shù)據(jù)中心的能耗降到最低水平,緩解碳排放的壓力。
但是具體到不同的行業(yè),需求也有側重。讓我們以采集數(shù)據(jù)最多,對技術要求也最苛刻的自動駕駛為例。
自動駕駛領域的特點就是數(shù)據(jù)采集量大,訓練模型豐富且差異化較大,不同階段數(shù)據(jù)的IO模型讀取的順序也不一樣。對于這些問題,曙光ParaStor采用的POSIX協(xié)議可以支持上萬個應用節(jié)點級別的云容器平臺,同時搭配多級智能緩存加速策略,最大化提升自動駕駛模型訓練和模擬仿真的效率。
此外,數(shù)據(jù)安全在自動駕駛領域也非常重要。因為車輛采集的數(shù)據(jù)涉及到國家經(jīng)濟、地理信息、用戶信息等隱私數(shù)據(jù),所以保護數(shù)據(jù)的安全十分必要。李國君提到,曙光通過精細化的權限控制,支持多因子認證、WORM、快照及回收站,保障數(shù)據(jù)存取安全和訪問合規(guī)。曙光可以提供從軟件到硬件全自主、全流程可控的存儲方案,全力保障數(shù)據(jù)存儲安全。
同樣,數(shù)據(jù)量大還會帶來另外的問題,那就是硬盤、網(wǎng)絡等組件發(fā)生故障的概率增加,這就涉及到運維的部分。李國君說,曙光有一套嚴密的監(jiān)控管理方案,可以及時監(jiān)測出故障組件,發(fā)出告警通知并自動化修復。
總的來說,在自動駕駛領域,曙光ParaStor主要從性能、安全、運維三個方面構建自身的獨特競爭力。
04.結語:自研存儲已有突破仍需堅持長期主義
曙光ParaStor斬獲IO500榜首,證明國內(nèi)自研存儲力量已經(jīng)獲得了巨大的進展和突破,開始在國際舞臺上嶄露頭角。
但是,目前整個存儲行業(yè)仍然面臨著非結構化數(shù)據(jù)爆發(fā)式增長、極致性能待優(yōu)化、技術不夠綠色節(jié)能等挑戰(zhàn)。
經(jīng)過多年深耕技術,曙光已經(jīng)在這些方面有所成效,解決了部分難題。但對于整個行業(yè)中的企業(yè)而言,它們該如何面對這些挑戰(zhàn)?
一方面,企業(yè)要預判行業(yè)發(fā)展,為未來的存儲需求提前做好技術儲備。另一方面,企業(yè)也需要沉下心來踏實做技術研發(fā),不斷投入時間成本,堅持長期主義。