這些年在科學界,國際頂級機構一直在做著同一件事,那就是為他們持續增長的海量數據找到價格更便宜的存身之處。現在,他們中的一些說:找到了。
由于已經受益于此,在他們的合作伙伴希捷把這個“秘密”——CORTX,一款獨立于硬件的100%開源對象存儲軟件——推向市場的時候,這些機構很樂意地站了出來,并對它表達了贊賞。法國原子能和替代能源委員會(CEA)和英國原子能機構(UKAEA)都是CORTX未發布前,就已經采用了它的早期用戶。CEA項目經理Jacques-Charles Lafoucriere,和UKAEA的百萬兆級算法專家Debasmita Samadder博士用“強大”、“靈活”、“高效”和“新穎”等詞匯去描述了他們眼中的CORTX。這些機構用它來支持超大規模的數據存儲,實現并行文件系統接口(pNFS)和分層存儲管理工具等。
兼容TensorFlow等人工智能和深度學習 (AI/DL) 工具也是他們的關注點——這些國際頂級機構永遠都會站在科技的最前沿。事實上,CORTX的用例非常廣泛,除人工智能和機器學習,還包括了混合云、邊緣、高性能計算等領域。那些機構負責人對CORTX的高度贊賞有著很高的可信度,因為這些機構中的一些已經不滿足于僅僅是去使用它了。“CORTX將降低EB級數據的存儲成本。”洛斯阿拉莫斯國家實驗室(Los Alamos National Laboratory)高性能計算部門負責人Gary Grider斷言。他們已經決定參與到CORTX協作開源社區中去。目前,CORTX已經可從GitHub下載,以及協作開發。
希捷科技全球副總裁暨中國區總裁孫丹:通過生態協作,CORTX將使超大規模存儲架構更為普及。
除了用戶,整個科技生態對CORTX的興趣也都相當濃厚。英特爾很清楚開源創新在高性能存儲領域的價值。英特爾數據平臺事業部副總裁Bryan Jorgensen認為,它將推高未來數據時代中云、高性能計算、人工智能和通信網絡等的性能水平。
目前英特爾已計劃在CORTX社區內結合相關的平臺功能,包括英特爾傲騰持久內存、英特爾QuickAssist加速器,和DAOS文件系統,以共同實現和優化這一開源技術。全球知名的文件系統提供商WekaIO也表達了同樣的意愿。WekaIO人工智能和戰略聯盟負責人Shailesh Manjrekar描繪了一個未來——在參與到CORTX開源項目開發中后,市場將可以利用創新的Weka AI解決方案框架,創建端到端解決方案:通過WekaFS提供卓越性能,而CORTX提供容量和耐用性。
在中國市場,目前已有8家希捷的客戶以及合作伙伴——新華三集團、同有科技、宏杉科技、UIT創新科、五舟科技、鯨鯊軟件、極道科技以及柏科數據等,決定將就CORTX開源軟件與開源社區與希捷展開合作。這個開源社區是在希捷發布CORTX時一同發布的。同時發布的還有一個可作為融合基礎架構部署的參考架構Lyve Drive Rack。
這個參考架構可以讓用戶部署CORTX并構建自己的大容量私有云——Lyve Drive Rack的機箱容量由1.34PB起。希捷在Datasphere峰會上展示它時,它的盤位上插滿了20TB HAMR硬盤。希捷消息稱,這款大容量硬盤計劃在12月開始供貨。這是希捷布局開源對象存儲軟件的目的之一。大容量硬盤已經為云服務商降低了成本,但它遠沒有到普及到程度。
受限于軟件實力,并不是每個想要用好海量數據的企業用戶,都能享受到它的好處——硬盤容量越大,I/O性能就會下降,這需要用戶有一定的優化能力對系統進行調優。“谷歌、百度和騰訊等互聯網和云計算企業,會第一時間使用我們的大容量硬盤,”希捷科技全球副總裁暨中國區總裁孫丹說,“因為他們通過采用大容量硬盤獲得了商業價值。”要知道,當今天的云服務商已經使用16T硬盤的時候,傳統企業才部署到8T。希捷相信免費和開源的CORTX能解決這一難題。
在推出它之前的數年間,“希捷已經為此寫出了百萬行代碼”,希捷科技中國區資深解決方案工程師李蓁說,考慮到未來人工智能、機器學習會是未來數據領域當中主流的應用,希捷已經在設計之初,專門針對AI以及機器學習做了調優。“我們在CORTX上面有一個內置的內存介質,通過這種設計,用戶可以直接在CORTX上對數據進行標注,同時可以進行非常高效的檢索。”李蓁說。Lyve Drive Rack上還設置有一顆專用芯片,它可以降低在使用糾刪碼的時候所需配置的內存——這達到了降低部署成本的效果。
孫丹相信,通過生態協作,CORTX將使超大規模存儲架構更為普及,科技實力相對較弱的企業也將可以經濟、快速地部署對象存儲,通過對海量數據進行標記來探索有數據價值的洞見。如果一切如預期般順利,CORTX和CORTX社區將是希捷給對象存儲帶來的巨大貢獻。事實上,希捷一直在對象存儲的協作開發中發揮關鍵作用。九十年代后期,希捷是行業聯盟的創始成員。該聯盟建立了第一個對象存儲規范:SNIA OSD標準。在這一點上,希捷對于對象存儲的創新和協作的承諾貫穿在 CORTX及其眾多架構優化中。“我覺得希捷做這件事,還是挺偉大的。”孫丹說,希捷內部對CORTX已經做出了新的5年規劃;而接下來要做的,就是讓它的生態變得更加繁榮。
責任編輯:xj
-
數據
+關注
關注
8文章
7075瀏覽量
89153 -
存儲
+關注
關注
13文章
4323瀏覽量
85930 -
軟件
+關注
關注
69文章
4968瀏覽量
87658 -
AI
+關注
關注
87文章
31044瀏覽量
269392
發布評論請先 登錄
相關推薦
評論