加入星計(jì)劃,您可以享受以下權(quán)益:

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴(kuò)散
  • 作品版權(quán)保護(hù)
  • 300W+ 專(zhuān)業(yè)用戶
  • 1.5W+ 優(yōu)質(zhì)創(chuàng)作者
  • 5000+ 長(zhǎng)期合作伙伴
立即加入
  • 正文
    • 應(yīng)數(shù)據(jù)之景
    • 解數(shù)據(jù)之怠
    • CORTX 有哪些本領(lǐng)?
    • 幕后英雄
  • 相關(guān)推薦
  • 電子產(chǎn)業(yè)圖譜
申請(qǐng)入駐 產(chǎn)業(yè)圖譜

海量數(shù)據(jù)奔涌,存儲(chǔ)巨頭希捷如何解題?

2020/11/12
211
閱讀需 11 分鐘
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點(diǎn)資訊討論

誰(shuí)能想到,硬朗、穩(wěn)重了四十年的希捷也開(kāi)始賣(mài)萌玩梗,緊跟潮流了。

對(duì)于李雪琴的“世界有盡頭”,希捷表示“數(shù)據(jù)沒(méi)有盡頭”。

在沒(méi)有盡頭的數(shù)據(jù)里,希捷又出什么新動(dòng)作?

近日,在“Let’s Rethink Data”希捷科技 Datasphere 峰會(huì)上,希捷發(fā)布了對(duì)象存儲(chǔ)軟件 CORTX 以及 CORTX 開(kāi)源社區(qū),以及 Lyve Drive Rack,這一基于 CORTX 軟件平臺(tái),開(kāi)放靈活、可作為融合基礎(chǔ)架構(gòu)部署的參考架構(gòu)。

當(dāng)硬漢變得柔情,希捷可能比你想象的更懂企業(yè)所苦所需。

應(yīng)數(shù)據(jù)之景

在了解希捷的最新產(chǎn)品之前,我們不妨回顧下如今的數(shù)據(jù)現(xiàn)狀。

其一,數(shù)據(jù)在以一種不可阻擋的勢(shì)頭增長(zhǎng)。

IDC 預(yù)測(cè),未來(lái)兩年企業(yè)數(shù)據(jù)將以每年 42.2%的速度增長(zhǎng)。到 2025 年,全球數(shù)據(jù)圈將增至 175ZB(1ZB 約為 1 萬(wàn)億 GB),而中國(guó)預(yù)計(jì)將以 48.6ZB 的數(shù)據(jù)量成為全球最大數(shù)據(jù)圈。

其二,大部分?jǐn)?shù)據(jù)并未被企業(yè)消化吸收。

IDC 統(tǒng)計(jì),在可用的企業(yè)數(shù)據(jù)中,僅 32%被投入使用,剩余的 68%并未得到利用。與此同時(shí),在創(chuàng)建的 175ZB 中,僅有 17ZB 得以被存儲(chǔ),剩余 90%的數(shù)據(jù)未得到存儲(chǔ)。

人人都知數(shù)據(jù)是不可或缺的生產(chǎn)要素,但如何用這要素做出一桌好菜,百業(yè)心心念念,卻未有完美正解。有效地獲取、存儲(chǔ)、分析以及變現(xiàn)數(shù)據(jù),一直被上下求索。

微觀來(lái)看,眼下最要緊的不外乎兩點(diǎn):

一則,面對(duì)物聯(lián)網(wǎng)、人工智能、5G 帶來(lái)的海量數(shù)據(jù),企業(yè)對(duì)超大規(guī)模數(shù)據(jù)存儲(chǔ)與治理的需求與日俱增;

二則,這些數(shù)據(jù)中,20%為結(jié)構(gòu)化數(shù)據(jù),80%為非結(jié)構(gòu)化數(shù)據(jù)。視頻、音頻、圖片等非結(jié)構(gòu)數(shù)據(jù)的占比大幅提升,成為數(shù)據(jù)治理之踵。

數(shù)據(jù)成本和價(jià)值成為風(fēng)暴的核心,數(shù)據(jù)管理、數(shù)據(jù)運(yùn)營(yíng)成為破題的關(guān)鍵。

IDC 調(diào)研顯示,只有 10%的企業(yè)全面實(shí)施了數(shù)據(jù)運(yùn)營(yíng),但事實(shí)證明,數(shù)據(jù)運(yùn)營(yíng)結(jié)合其它數(shù)據(jù)管理解決方案,能夠顯著改善業(yè)務(wù)效果,包括提高客戶忠誠(chéng)度、收入、利潤(rùn)、節(jié)約成本以及其它許多裨益。

數(shù)據(jù)的存儲(chǔ)和運(yùn)營(yíng)可以往何處行進(jìn)?存儲(chǔ)巨頭希捷給出了答案。

解數(shù)據(jù)之怠

BAT、谷歌、Facebook 等互聯(lián)網(wǎng)巨頭是海量數(shù)據(jù)的最早發(fā)源地之一,也是最早對(duì)海量數(shù)據(jù)存儲(chǔ)產(chǎn)生需求、從中獲得商業(yè)回報(bào)之流。

高居行業(yè)頭部,這類(lèi)公司財(cái)力、人力和技術(shù)實(shí)力俱佳。本身就是軟件公司,擁有獨(dú)立的數(shù)據(jù)算法與架構(gòu)優(yōu)化工程師團(tuán)隊(duì),可以通過(guò)系統(tǒng)軟件調(diào)優(yōu),快速地采用大容量硬盤(pán),享受到數(shù)據(jù)中心 TCO 降低的益處。但對(duì)大多數(shù)中小企業(yè)和傳統(tǒng)企業(yè)來(lái)講,他們既沒(méi)有足夠的資金,也沒(méi)有精力和技術(shù)。

CORTX 正是基于這樣的背景,應(yīng)運(yùn)而生。

CORTX 有哪些本領(lǐng)?

存儲(chǔ)量是最基本的需求,CORTX 尤為擅長(zhǎng)大規(guī)模數(shù)據(jù)存儲(chǔ)。

CORTX 是對(duì)象存儲(chǔ)平臺(tái),這種存儲(chǔ)方式主要是解決海量圖片、文檔、音視頻等非結(jié)構(gòu)數(shù)據(jù)的存儲(chǔ)。

但這并不意味著 CORTX 受限于硬盤(pán),混用不同容量點(diǎn)硬盤(pán)同時(shí),CORTX 的性能和兼容性并不為所累。

換言之,CORTX 軟件不僅可以使用不同代數(shù)、不同結(jié)構(gòu)、甚至不同容量點(diǎn)實(shí)現(xiàn)利舊的最大化,還能針對(duì)用戶的硬件進(jìn)行定制化配置。

要知道,對(duì)于小容量硬盤(pán)的隨機(jī)讀寫(xiě)等性能需求,在對(duì)象存儲(chǔ)使用環(huán)境中并不利于解決 I/O 模式,但百萬(wàn)行代碼的 CORTX,脫胎于全新的設(shè)計(jì)理念,可方便地集成其他第三方組件。

成本是最關(guān)心的訴求,CORTX 增大容量、增長(zhǎng)壽命,降低總成本。

公有云超大規(guī)模存儲(chǔ)基礎(chǔ)架構(gòu)依靠大容量設(shè)備的成本效率來(lái)降低存儲(chǔ)成本,降低成本的途徑之一,就是通過(guò)新技術(shù)增加硬盤(pán)容量。

希捷使用熱輔助磁記錄 HAMR 技術(shù)——通過(guò)在磁記錄過(guò)程中使用激光加熱來(lái)降低介質(zhì)的矯頑力,借助 HAMR 技術(shù)提高單碟存儲(chǔ)密度,進(jìn)而降低總體擁有成本。

通過(guò)使用 CORTX,結(jié)合高密度存儲(chǔ)硬件,對(duì)比使用傳統(tǒng)的 Ceph,在 11 個(gè) 9 的可用性的前提下,通過(guò) CORTX 每 TB 可以降低一半的造價(jià)。

除此之外,HAMR 能夠增加可用區(qū)域的數(shù)據(jù)存儲(chǔ)量(磁密度),讓硬盤(pán)產(chǎn)品長(zhǎng)久不衰。希捷官方資料顯示,HAMR 的年寫(xiě)入量已經(jīng)達(dá)到 3.2PB,達(dá)到普通企業(yè)級(jí) CMR 硬盤(pán)寫(xiě)入量 500TB/ 年的 6 倍以上。

企業(yè)對(duì)存儲(chǔ)快速、簡(jiǎn)單、高效、安全的期待,CORTX 一個(gè)不落。

怎么做到更快?CORTX 平臺(tái)支持下,數(shù)據(jù)是可以直接寫(xiě)入磁盤(pán)的,從而跳過(guò)了繁瑣而復(fù)雜的文件系統(tǒng),直接訪問(wèn)和解鎖每個(gè)驅(qū)動(dòng)器。

如何擴(kuò)展?CORTX 元數(shù)據(jù)是通過(guò)鍵值的形式來(lái)管理,可以非常方便地進(jìn)行橫向擴(kuò)展。

另外,針對(duì)人工智能和機(jī)器學(xué)習(xí)等數(shù)據(jù)主流應(yīng)用領(lǐng)域,CORTX 有針對(duì)性地進(jìn)行調(diào)優(yōu),通過(guò)希捷內(nèi)置的內(nèi)存介質(zhì),用戶可直接在 CORTX 上對(duì)數(shù)據(jù)進(jìn)行標(biāo)注,并實(shí)時(shí)、高效檢索。

多副本+糾刪碼以及監(jiān)控是 CORTX 保護(hù)數(shù)據(jù)的閥門(mén)。

CORTX 的多副本,簡(jiǎn)單易用,可靠性極高,而多層糾刪碼,可在更大規(guī)模數(shù)據(jù)存儲(chǔ)的場(chǎng)景下實(shí)現(xiàn)數(shù)據(jù)的高可用性。在對(duì)象存儲(chǔ)實(shí)際生產(chǎn)環(huán)境中,對(duì)于熱數(shù)據(jù)會(huì)使用多副本策略來(lái)冗余,冷數(shù)據(jù)則使用糾刪碼。

而且,希捷的自動(dòng)化監(jiān)控和監(jiān)控管理也能加固數(shù)據(jù)安全。

Lyve Drive Rack 作為一個(gè)開(kāi)放、靈活的融合存儲(chǔ)基礎(chǔ)架構(gòu),可為用戶提供成熟的參考架構(gòu),用于部署 CORTX 并構(gòu)建自己的大容量私有云。也可以根據(jù)用戶做定制化的配置,針對(duì)企業(yè)實(shí)際應(yīng)用中對(duì)隨機(jī)讀寫(xiě)性能以及小塊文件 IO 優(yōu)化上進(jìn)行個(gè)性化調(diào)優(yōu)。

Lyve Drive Rack 集成的芯片,對(duì)糾刪碼配置內(nèi)存做了優(yōu)化,節(jié)約了內(nèi)存消耗帶來(lái)的成本。目前 Lyve Drive Rack 的機(jī)箱容量由 1.34PB 起。

如果說(shuō)以上是 CORTX 客觀上的解題實(shí)力,那么開(kāi)源就是希捷主觀上的解題戰(zhàn)略。

前文所言,傳統(tǒng)企業(yè)沒(méi)有優(yōu)化數(shù)據(jù)中心之能,希捷重磅推出的 CORTX 軟件目的并非盈利,而是希望通過(guò)其軟件、兼容、開(kāi)源之利,讓大容量硬盤(pán)不再只是巨頭的囊中物,降低企業(yè)成本,讓其不再囿于反復(fù)權(quán)衡數(shù)據(jù)成本和價(jià)值。

CORTX 所有的功能和路線圖都由開(kāi)源社區(qū)驅(qū)動(dòng),用戶可從 GitHub 直接下載,并進(jìn)行協(xié)作開(kāi)發(fā)。

而且,CORTX 全段開(kāi)源,用戶可以方便地添加自己所需特性,另外,CORTX 和所有主流公有云廠家所使用的對(duì)象存儲(chǔ)軟件完全兼容。

不捆綁用戶是存儲(chǔ)巨頭希捷特有的大氣與胸徑,CORTX 軟件并非和希捷硬件綁定,客戶可以隨意選擇硬件,免于供應(yīng)商鎖定之憂。

事實(shí)上,在 CORTX 產(chǎn)品發(fā)布前,已經(jīng)不乏嘗鮮者,紛紛給出五星好評(píng)。

法國(guó)原子能和提點(diǎn)能源委員會(huì)(CEA)測(cè)試 CORTX 開(kāi)發(fā)版本多年,對(duì) CORTX 的使用體驗(yàn)頗有感觸:對(duì)于超大規(guī)模數(shù)據(jù)存儲(chǔ),高效且靈活,可與存儲(chǔ)工具和不同類(lèi)型的存儲(chǔ)接口配合。CORTX 和 CORTX 社區(qū)也俘獲了英特爾和 WekaIO 等一眾巨頭的芳心。

其實(shí),對(duì)于開(kāi)源生態(tài),希捷并非盲目推陳出新,長(zhǎng)期戰(zhàn)略是希捷的初衷,其內(nèi)部對(duì)于 CORTX 已經(jīng)有五年規(guī)劃,生態(tài)內(nèi)伙伴可放心進(jìn)入希捷的開(kāi)源懷抱。

幕后英雄

自 1979 年成立,如今四十一周歲的希捷已是全球最大的硬盤(pán)、磁盤(pán)和讀寫(xiě)磁頭制造商,產(chǎn)品覆蓋全球幾千個(gè)城市,為數(shù)十億人提供便捷數(shù)據(jù)服務(wù)。

40 多年征途中,性能和容量是希捷不變的目標(biāo),通過(guò) HAMR 以及 MACH.2 技術(shù)創(chuàng)新不斷打破密度、容量和性能的邊界,通過(guò) CORTX 和數(shù)據(jù)存儲(chǔ)系統(tǒng)實(shí)現(xiàn)海量數(shù)據(jù)硬盤(pán)普惠,降低企業(yè)成本。

數(shù)字化轉(zhuǎn)型時(shí)代,市場(chǎng)需要奮勇向前的企業(yè),也需要為企業(yè)降本增效,解除后顧之憂的后勤主管。

指數(shù)增長(zhǎng)的數(shù)據(jù)洪流面前,需要世界頂尖的存儲(chǔ)廠商提供容量更大,性能更強(qiáng),穩(wěn)定性、安全性更好的存儲(chǔ)產(chǎn)品去積極應(yīng)對(duì)數(shù)據(jù)挑戰(zhàn)。

?

時(shí)代選擇了希捷,希捷也在無(wú)形中成就了時(shí)代。

希捷

希捷

40 年來(lái),Seagate 憑借突破性的硬盤(pán)、固態(tài)硬盤(pán)、系統(tǒng)和恢復(fù)服務(wù)實(shí)現(xiàn)了指數(shù)級(jí)數(shù)據(jù)增長(zhǎng)。我們提供跨監(jiān)控、NAS、數(shù)據(jù)中心、消費(fèi)者數(shù)據(jù)存儲(chǔ)等領(lǐng)域的端到端數(shù)據(jù)管理解決方案。

40 年來(lái),Seagate 憑借突破性的硬盤(pán)、固態(tài)硬盤(pán)、系統(tǒng)和恢復(fù)服務(wù)實(shí)現(xiàn)了指數(shù)級(jí)數(shù)據(jù)增長(zhǎng)。我們提供跨監(jiān)控、NAS、數(shù)據(jù)中心、消費(fèi)者數(shù)據(jù)存儲(chǔ)等領(lǐng)域的端到端數(shù)據(jù)管理解決方案。收起

查看更多

相關(guān)推薦

電子產(chǎn)業(yè)圖譜