《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 模擬設(shè)計(jì) > 業(yè)界動(dòng)態(tài) > 存儲(chǔ)軟件CORTX進(jìn)入市場(chǎng),超大規(guī)模存儲(chǔ)架構(gòu)有望走向普及

存儲(chǔ)軟件CORTX進(jìn)入市場(chǎng),超大規(guī)模存儲(chǔ)架構(gòu)有望走向普及

2020-11-17
來(lái)源:IT創(chuàng)事記

這些年在科學(xué)界,國(guó)際頂級(jí)機(jī)構(gòu)一直在做著同一件事,那就是為他們持續(xù)增長(zhǎng)的海量數(shù)據(jù)找到價(jià)格更便宜的存身之處?,F(xiàn)在,他們中的一些說(shuō):找到了。

由于已經(jīng)受益于此,在他們的合作伙伴希捷把這個(gè)“秘密”——CORTX,一款獨(dú)立于硬件的100%開(kāi)源對(duì)象存儲(chǔ)軟件——推向市場(chǎng)的時(shí)候,這些機(jī)構(gòu)很樂(lè)意地站了出來(lái),并對(duì)它表達(dá)了贊賞。法國(guó)原子能和替代能源委員會(huì)(CEA)和英國(guó)原子能機(jī)構(gòu)(UKAEA)都是CORTX未發(fā)布前,就已經(jīng)采用了它的早期用戶(hù)。CEA項(xiàng)目經(jīng)理Jacques-Charles Lafoucriere,和UKAEA的百萬(wàn)兆級(jí)算法專(zhuān)家Debasmita Samadder博士用“強(qiáng)大”、“靈活”、“高效”和“新穎”等詞匯去描述了他們眼中的CORTX。這些機(jī)構(gòu)用它來(lái)支持超大規(guī)模的數(shù)據(jù)存儲(chǔ),實(shí)現(xiàn)并行文件系統(tǒng)接口(pNFS)和分層存儲(chǔ)管理工具等。兼容TensorFlow等人工智能和深度學(xué)習(xí) (AI/DL) 工具也是他們的關(guān)注點(diǎn)——這些國(guó)際頂級(jí)機(jī)構(gòu)永遠(yuǎn)都會(huì)站在科技的最前沿。事實(shí)上,CORTX的用例非常廣泛,除人工智能和機(jī)器學(xué)習(xí),還包括了混合云、邊緣、高性能計(jì)算等領(lǐng)域。那些機(jī)構(gòu)負(fù)責(zé)人對(duì)CORTX的高度贊賞有著很高的可信度,因?yàn)檫@些機(jī)構(gòu)中的一些已經(jīng)不滿(mǎn)足于僅僅是去使用它了?!癈ORTX將降低EB級(jí)數(shù)據(jù)的存儲(chǔ)成本。”洛斯阿拉莫斯國(guó)家實(shí)驗(yàn)室(Los Alamos National Laboratory)高性能計(jì)算部門(mén)負(fù)責(zé)人Gary Grider斷言。他們已經(jīng)決定參與到CORTX協(xié)作開(kāi)源社區(qū)中去。目前,CORTX已經(jīng)可從GitHub下載,以及協(xié)作開(kāi)發(fā)。

希捷科技全球副總裁暨中國(guó)區(qū)總裁孫丹:通過(guò)生態(tài)協(xié)作,CORTX將使超大規(guī)模存儲(chǔ)架構(gòu)更為普及。

除了用戶(hù),整個(gè)科技生態(tài)對(duì)CORTX的興趣也都相當(dāng)濃厚。英特爾很清楚開(kāi)源創(chuàng)新在高性能存儲(chǔ)領(lǐng)域的價(jià)值。英特爾數(shù)據(jù)平臺(tái)事業(yè)部副總裁Bryan Jorgensen認(rèn)為,它將推高未來(lái)數(shù)據(jù)時(shí)代中云、高性能計(jì)算、人工智能和通信網(wǎng)絡(luò)等的性能水平。目前英特爾已計(jì)劃在CORTX社區(qū)內(nèi)結(jié)合相關(guān)的平臺(tái)功能,包括英特爾傲騰持久內(nèi)存、英特爾QuickAssist加速器,和DAOS文件系統(tǒng),以共同實(shí)現(xiàn)和優(yōu)化這一開(kāi)源技術(shù)。全球知名的文件系統(tǒng)提供商WekaIO也表達(dá)了同樣的意愿。WekaIO人工智能和戰(zhàn)略聯(lián)盟負(fù)責(zé)人Shailesh Manjrekar描繪了一個(gè)未來(lái)——在參與到CORTX開(kāi)源項(xiàng)目開(kāi)發(fā)中后,市場(chǎng)將可以利用創(chuàng)新的Weka AI解決方案框架,創(chuàng)建端到端解決方案:通過(guò)WekaFS提供卓越性能,而CORTX提供容量和耐用性。在中國(guó)市場(chǎng),目前已有8家希捷的客戶(hù)以及合作伙伴——新華三集團(tuán)、同有科技、宏杉科技、UIT創(chuàng)新科、五舟科技、鯨鯊軟件、極道科技以及柏科數(shù)據(jù)等,決定將就CORTX開(kāi)源軟件與開(kāi)源社區(qū)與希捷展開(kāi)合作。這個(gè)開(kāi)源社區(qū)是在希捷發(fā)布CORTX時(shí)一同發(fā)布的。同時(shí)發(fā)布的還有一個(gè)可作為融合基礎(chǔ)架構(gòu)部署的參考架構(gòu)Lyve Drive Rack。

wx_article_20201116200847_Q2yxkI.jpg

這個(gè)參考架構(gòu)可以讓用戶(hù)部署CORTX并構(gòu)建自己的大容量私有云——Lyve Drive Rack的機(jī)箱容量由1.34PB起。希捷在Datasphere峰會(huì)上展示它時(shí),它的盤(pán)位上插滿(mǎn)了20TB HAMR硬盤(pán)。希捷消息稱(chēng),這款大容量硬盤(pán)計(jì)劃在12月開(kāi)始供貨。這是希捷布局開(kāi)源對(duì)象存儲(chǔ)軟件的目的之一。大容量硬盤(pán)已經(jīng)為云服務(wù)商降低了成本,但它遠(yuǎn)沒(méi)有到普及到程度。受限于軟件實(shí)力,并不是每個(gè)想要用好海量數(shù)據(jù)的企業(yè)用戶(hù),都能享受到它的好處——硬盤(pán)容量越大,I/O性能就會(huì)下降,這需要用戶(hù)有一定的優(yōu)化能力對(duì)系統(tǒng)進(jìn)行調(diào)優(yōu)。“谷歌、百度和騰訊等互聯(lián)網(wǎng)和云計(jì)算企業(yè),會(huì)第一時(shí)間使用我們的大容量硬盤(pán),”希捷科技全球副總裁暨中國(guó)區(qū)總裁孫丹說(shuō),“因?yàn)樗麄兺ㄟ^(guò)采用大容量硬盤(pán)獲得了商業(yè)價(jià)值?!币?,當(dāng)今天的云服務(wù)商已經(jīng)使用16T硬盤(pán)的時(shí)候,傳統(tǒng)企業(yè)才部署到8T。希捷相信免費(fèi)和開(kāi)源的CORTX能解決這一難題。在推出它之前的數(shù)年間,“希捷已經(jīng)為此寫(xiě)出了百萬(wàn)行代碼”,希捷科技中國(guó)區(qū)資深解決方案工程師李蓁說(shuō),考慮到未來(lái)人工智能、機(jī)器學(xué)習(xí)會(huì)是未來(lái)數(shù)據(jù)領(lǐng)域當(dāng)中主流的應(yīng)用,希捷已經(jīng)在設(shè)計(jì)之初,專(zhuān)門(mén)針對(duì)AI以及機(jī)器學(xué)習(xí)做了調(diào)優(yōu)。“我們?cè)贑ORTX上面有一個(gè)內(nèi)置的內(nèi)存介質(zhì),通過(guò)這種設(shè)計(jì),用戶(hù)可以直接在CORTX上對(duì)數(shù)據(jù)進(jìn)行標(biāo)注,同時(shí)可以進(jìn)行非常高效的檢索?!崩钶枵f(shuō)。Lyve Drive Rack上還設(shè)置有一顆專(zhuān)用芯片,它可以降低在使用糾刪碼的時(shí)候所需配置的內(nèi)存——這達(dá)到了降低部署成本的效果。孫丹相信,通過(guò)生態(tài)協(xié)作,CORTX將使超大規(guī)模存儲(chǔ)架構(gòu)更為普及,科技實(shí)力相對(duì)較弱的企業(yè)也將可以經(jīng)濟(jì)、快速地部署對(duì)象存儲(chǔ),通過(guò)對(duì)海量數(shù)據(jù)進(jìn)行標(biāo)記來(lái)探索有數(shù)據(jù)價(jià)值的洞見(jiàn)。如果一切如預(yù)期般順利,CORTX和CORTX社區(qū)將是希捷給對(duì)象存儲(chǔ)帶來(lái)的巨大貢獻(xiàn)。事實(shí)上,希捷一直在對(duì)象存儲(chǔ)的協(xié)作開(kāi)發(fā)中發(fā)揮關(guān)鍵作用。九十年代后期,希捷是行業(yè)聯(lián)盟的創(chuàng)始成員。該聯(lián)盟建立了第一個(gè)對(duì)象存儲(chǔ)規(guī)范:SNIA OSD標(biāo)準(zhǔn)。在這一點(diǎn)上,希捷對(duì)于對(duì)象存儲(chǔ)的創(chuàng)新和協(xié)作的承諾貫穿在 CORTX及其眾多架構(gòu)優(yōu)化中?!拔矣X(jué)得希捷做這件事,還是挺偉大的?!睂O丹說(shuō),希捷內(nèi)部對(duì)CORTX已經(jīng)做出了新的5年規(guī)劃;而接下來(lái)要做的,就是讓它的生態(tài)變得更加繁榮。


本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點(diǎn)。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無(wú)法一一聯(lián)系確認(rèn)版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問(wèn)題,請(qǐng)及時(shí)通過(guò)電子郵件或電話(huà)通知我們,以便迅速采取適當(dāng)措施,避免給雙方造成不必要的經(jīng)濟(jì)損失。聯(lián)系電話(huà):010-82306118;郵箱:aet@chinaaet.com。