加入星計劃,您可以享受以下權益:

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴散
  • 作品版權保護
  • 300W+ 專業(yè)用戶
  • 1.5W+ 優(yōu)質創(chuàng)作者
  • 5000+ 長期合作伙伴
立即加入
  • 正文
    • 應數(shù)據(jù)之景
    • 解數(shù)據(jù)之怠
    • CORTX 有哪些本領?
    • 幕后英雄
  • 相關推薦
  • 電子產(chǎn)業(yè)圖譜
申請入駐 產(chǎn)業(yè)圖譜

海量數(shù)據(jù)奔涌,存儲巨頭希捷如何解題?

2020/11/12
186
閱讀需 11 分鐘
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點資訊討論

誰能想到,硬朗、穩(wěn)重了四十年的希捷也開始賣萌玩梗,緊跟潮流了。

對于李雪琴的“世界有盡頭”,希捷表示“數(shù)據(jù)沒有盡頭”。

在沒有盡頭的數(shù)據(jù)里,希捷又出什么新動作?

近日,在“Let’s Rethink Data”希捷科技 Datasphere 峰會上,希捷發(fā)布了對象存儲軟件 CORTX 以及 CORTX 開源社區(qū),以及 Lyve Drive Rack,這一基于 CORTX 軟件平臺,開放靈活、可作為融合基礎架構部署的參考架構。

當硬漢變得柔情,希捷可能比你想象的更懂企業(yè)所苦所需。

應數(shù)據(jù)之景

在了解希捷的最新產(chǎn)品之前,我們不妨回顧下如今的數(shù)據(jù)現(xiàn)狀。

其一,數(shù)據(jù)在以一種不可阻擋的勢頭增長。

IDC 預測,未來兩年企業(yè)數(shù)據(jù)將以每年 42.2%的速度增長。到 2025 年,全球數(shù)據(jù)圈將增至 175ZB(1ZB 約為 1 萬億 GB),而中國預計將以 48.6ZB 的數(shù)據(jù)量成為全球最大數(shù)據(jù)圈。

其二,大部分數(shù)據(jù)并未被企業(yè)消化吸收。

IDC 統(tǒng)計,在可用的企業(yè)數(shù)據(jù)中,僅 32%被投入使用,剩余的 68%并未得到利用。與此同時,在創(chuàng)建的 175ZB 中,僅有 17ZB 得以被存儲,剩余 90%的數(shù)據(jù)未得到存儲。

人人都知數(shù)據(jù)是不可或缺的生產(chǎn)要素,但如何用這要素做出一桌好菜,百業(yè)心心念念,卻未有完美正解。有效地獲取、存儲、分析以及變現(xiàn)數(shù)據(jù),一直被上下求索。

微觀來看,眼下最要緊的不外乎兩點:

一則,面對物聯(lián)網(wǎng)、人工智能5G 帶來的海量數(shù)據(jù),企業(yè)對超大規(guī)模數(shù)據(jù)存儲與治理的需求與日俱增;

二則,這些數(shù)據(jù)中,20%為結構化數(shù)據(jù),80%為非結構化數(shù)據(jù)。視頻、音頻、圖片等非結構數(shù)據(jù)的占比大幅提升,成為數(shù)據(jù)治理之踵。

數(shù)據(jù)成本和價值成為風暴的核心,數(shù)據(jù)管理、數(shù)據(jù)運營成為破題的關鍵。

IDC 調研顯示,只有 10%的企業(yè)全面實施了數(shù)據(jù)運營,但事實證明,數(shù)據(jù)運營結合其它數(shù)據(jù)管理解決方案,能夠顯著改善業(yè)務效果,包括提高客戶忠誠度、收入、利潤、節(jié)約成本以及其它許多裨益。

數(shù)據(jù)的存儲和運營可以往何處行進?存儲巨頭希捷給出了答案。

解數(shù)據(jù)之怠

BAT、谷歌、Facebook 等互聯(lián)網(wǎng)巨頭是海量數(shù)據(jù)的最早發(fā)源地之一,也是最早對海量數(shù)據(jù)存儲產(chǎn)生需求、從中獲得商業(yè)回報之流。

高居行業(yè)頭部,這類公司財力、人力和技術實力俱佳。本身就是軟件公司,擁有獨立的數(shù)據(jù)算法與架構優(yōu)化工程師團隊,可以通過系統(tǒng)軟件調優(yōu),快速地采用大容量硬盤,享受到數(shù)據(jù)中心 TCO 降低的益處。但對大多數(shù)中小企業(yè)和傳統(tǒng)企業(yè)來講,他們既沒有足夠的資金,也沒有精力和技術。

CORTX 正是基于這樣的背景,應運而生。

CORTX 有哪些本領?

存儲量是最基本的需求,CORTX 尤為擅長大規(guī)模數(shù)據(jù)存儲。

CORTX 是對象存儲平臺,這種存儲方式主要是解決海量圖片、文檔、音視頻等非結構數(shù)據(jù)的存儲。

但這并不意味著 CORTX 受限于硬盤,混用不同容量點硬盤同時,CORTX 的性能和兼容性并不為所累。

換言之,CORTX 軟件不僅可以使用不同代數(shù)、不同結構、甚至不同容量點實現(xiàn)利舊的最大化,還能針對用戶的硬件進行定制化配置。

要知道,對于小容量硬盤的隨機讀寫等性能需求,在對象存儲使用環(huán)境中并不利于解決 I/O 模式,但百萬行代碼的 CORTX,脫胎于全新的設計理念,可方便地集成其他第三方組件。

成本是最關心的訴求,CORTX 增大容量、增長壽命,降低總成本。

公有云超大規(guī)模存儲基礎架構依靠大容量設備的成本效率來降低存儲成本,降低成本的途徑之一,就是通過新技術增加硬盤容量。

希捷使用熱輔助磁記錄 HAMR 技術——通過在磁記錄過程中使用激光加熱來降低介質的矯頑力,借助 HAMR 技術提高單碟存儲密度,進而降低總體擁有成本。

通過使用 CORTX,結合高密度存儲硬件,對比使用傳統(tǒng)的 Ceph,在 11 個 9 的可用性的前提下,通過 CORTX 每 TB 可以降低一半的造價。

除此之外,HAMR 能夠增加可用區(qū)域的數(shù)據(jù)存儲量(磁密度),讓硬盤產(chǎn)品長久不衰。希捷官方資料顯示,HAMR 的年寫入量已經(jīng)達到 3.2PB,達到普通企業(yè)級 CMR 硬盤寫入量 500TB/ 年的 6 倍以上。

企業(yè)對存儲快速、簡單、高效、安全的期待,CORTX 一個不落。

怎么做到更快?CORTX 平臺支持下,數(shù)據(jù)是可以直接寫入磁盤的,從而跳過了繁瑣而復雜的文件系統(tǒng),直接訪問和解鎖每個驅動器。

如何擴展?CORTX 元數(shù)據(jù)是通過鍵值的形式來管理,可以非常方便地進行橫向擴展。

另外,針對人工智能和機器學習等數(shù)據(jù)主流應用領域,CORTX 有針對性地進行調優(yōu),通過希捷內(nèi)置的內(nèi)存介質,用戶可直接在 CORTX 上對數(shù)據(jù)進行標注,并實時、高效檢索。

多副本+糾刪碼以及監(jiān)控是 CORTX 保護數(shù)據(jù)的閥門。

CORTX 的多副本,簡單易用,可靠性極高,而多層糾刪碼,可在更大規(guī)模數(shù)據(jù)存儲的場景下實現(xiàn)數(shù)據(jù)的高可用性。在對象存儲實際生產(chǎn)環(huán)境中,對于熱數(shù)據(jù)會使用多副本策略來冗余,冷數(shù)據(jù)則使用糾刪碼。

而且,希捷的自動化監(jiān)控和監(jiān)控管理也能加固數(shù)據(jù)安全

Lyve Drive Rack 作為一個開放、靈活的融合存儲基礎架構,可為用戶提供成熟的參考架構,用于部署 CORTX 并構建自己的大容量私有云。也可以根據(jù)用戶做定制化的配置,針對企業(yè)實際應用中對隨機讀寫性能以及小塊文件 IO 優(yōu)化上進行個性化調優(yōu)。

Lyve Drive Rack 集成的芯片,對糾刪碼配置內(nèi)存做了優(yōu)化,節(jié)約了內(nèi)存消耗帶來的成本。目前 Lyve Drive Rack 的機箱容量由 1.34PB 起。

如果說以上是 CORTX 客觀上的解題實力,那么開源就是希捷主觀上的解題戰(zhàn)略。

前文所言,傳統(tǒng)企業(yè)沒有優(yōu)化數(shù)據(jù)中心之能,希捷重磅推出的 CORTX 軟件目的并非盈利,而是希望通過其軟件、兼容、開源之利,讓大容量硬盤不再只是巨頭的囊中物,降低企業(yè)成本,讓其不再囿于反復權衡數(shù)據(jù)成本和價值。

CORTX 所有的功能和路線圖都由開源社區(qū)驅動,用戶可從 GitHub 直接下載,并進行協(xié)作開發(fā)。

而且,CORTX 全段開源,用戶可以方便地添加自己所需特性,另外,CORTX 和所有主流公有云廠家所使用的對象存儲軟件完全兼容。

不捆綁用戶是存儲巨頭希捷特有的大氣與胸徑,CORTX 軟件并非和希捷硬件綁定,客戶可以隨意選擇硬件,免于供應商鎖定之憂。

事實上,在 CORTX 產(chǎn)品發(fā)布前,已經(jīng)不乏嘗鮮者,紛紛給出五星好評。

法國原子能和提點能源委員會(CEA)測試 CORTX 開發(fā)版本多年,對 CORTX 的使用體驗頗有感觸:對于超大規(guī)模數(shù)據(jù)存儲,高效且靈活,可與存儲工具和不同類型的存儲接口配合。CORTX 和 CORTX 社區(qū)也俘獲了英特爾和 WekaIO 等一眾巨頭的芳心。

其實,對于開源生態(tài),希捷并非盲目推陳出新,長期戰(zhàn)略是希捷的初衷,其內(nèi)部對于 CORTX 已經(jīng)有五年規(guī)劃,生態(tài)內(nèi)伙伴可放心進入希捷的開源懷抱。

幕后英雄

自 1979 年成立,如今四十一周歲的希捷已是全球最大的硬盤、磁盤和讀寫磁頭制造商,產(chǎn)品覆蓋全球幾千個城市,為數(shù)十億人提供便捷數(shù)據(jù)服務。

40 多年征途中,性能和容量是希捷不變的目標,通過 HAMR 以及 MACH.2 技術創(chuàng)新不斷打破密度、容量和性能的邊界,通過 CORTX 和數(shù)據(jù)存儲系統(tǒng)實現(xiàn)海量數(shù)據(jù)硬盤普惠,降低企業(yè)成本。

數(shù)字化轉型時代,市場需要奮勇向前的企業(yè),也需要為企業(yè)降本增效,解除后顧之憂的后勤主管。

指數(shù)增長的數(shù)據(jù)洪流面前,需要世界頂尖的存儲廠商提供容量更大,性能更強,穩(wěn)定性、安全性更好的存儲產(chǎn)品去積極應對數(shù)據(jù)挑戰(zhàn)。

?

時代選擇了希捷,希捷也在無形中成就了時代。

希捷

希捷

40 年來,Seagate 憑借突破性的硬盤、固態(tài)硬盤、系統(tǒng)和恢復服務實現(xiàn)了指數(shù)級數(shù)據(jù)增長。我們提供跨監(jiān)控、NAS、數(shù)據(jù)中心、消費者數(shù)據(jù)存儲等領域的端到端數(shù)據(jù)管理解決方案。

40 年來,Seagate 憑借突破性的硬盤、固態(tài)硬盤、系統(tǒng)和恢復服務實現(xiàn)了指數(shù)級數(shù)據(jù)增長。我們提供跨監(jiān)控、NAS、數(shù)據(jù)中心、消費者數(shù)據(jù)存儲等領域的端到端數(shù)據(jù)管理解決方案。收起

查看更多

相關推薦

電子產(chǎn)業(yè)圖譜