近日,全球超級計算機領導者 Cray Inc. 宣布,Frontiersman Cray為“最大的單一文件系統”提供了5000萬美元的存儲合同,為美國Oak Ridge國家實驗室(ORNL)Frontier exascale超級計算機提供1 exabyte的ClusterStor存儲。
Frontier是價值6億美元的Cray-AMD exascale系統,最高可達1.5 exaFLOPS,將于2021年交付,并于2022年驗收。它將成為ORNL 200 petaFLOPS Summit超級計算機的后續產品。
Cray憑借其在5月份由AMD EPYC處理器和Radeon Instinct GPU驅動的Shasta超級計算機贏得了Frontier競標,因此相關的存儲合同并不出乎意料。
該存儲解決方案是針對億億次級數據密集型工作負載的新設計,將基于下一代Cray?ClusterStor?存儲和Cray Slingshot?高速互連。下一代Cray?ClusterStor?存儲文件系統是基于Cray的Shasta?的架構,并且將作為ORNL國家實驗室的的一部分集成到Frontier exascale超級計算機。
新的存儲解決方案將由超過一兆字節(EB)的混合閃存和運行Lustre?并行文件系統的高容量存儲組成。一個exabyte的存儲空間是1000PB,這足以存儲超過2億個高清電影。存儲解決方案將通過Slingshot系統互連到ORNL exascale超級計算機,實現系統上同時運行的各種建模,仿真,分析和AI工作負載的無縫擴展。該Frontier exascale超級計算機預計將于2021年首次亮相,成為世界上功能最強大的計算機,性能超過1.5 exaflops。
與ORNL目前的Summit超級計算機的存儲相比,這種下一代解決方案,容量是其四倍以上(超過1 EB(或1,000 PB)而不是250 PB),另外和基于Spectrum Scale的存儲系統的2.5 TB / s相比,吞吐量將超過4倍(高達10 TB / s)。面向ORNL的新型Cray ClusterStor存儲解決方案將包含40多個存儲柜,并在兩層存儲中提供超過1 EB的總容量,以支持數據的隨機和流式訪問。主層是用于高性能臨時存儲的閃存層,而輔助層是用于高容量存儲的硬盤層。新的存儲系統將成為ORNL的中心系統,該Frontier exascale系統將由具有ZFS本地卷的Lustre全局并行文件系統訪問,所有這些都在一個全局POSIX命名空間中,這將使其成為世界上最大的單個高性能文件系統。
ORNL的Frontier項目主管Justin Whitt透露,新的解決方案將為科學家提供傳統建模和模擬以及深度學習和數據科學所需的性能和容量。
HPC存儲系統傳統上使用大型硬盤陣列來滿足大量可預測的數據讀取和寫入訪問。這與人工智能和機器學習工作負載形成鮮明對比,后者通常混合使用小型和大型數據的隨機和順序訪問。因此,傳統存儲系統不適合這些工作負載的綜合使用,因為混合數據的訪問和智能高速系統互連的需求,可以快速地在超級計算機上移動大量數據,從而使這些不同的工作負載在Frontier exascale系統上同時運行。
下一代基于ClusterStor的存儲解決方案通過提供閃存和容量存儲的混合來支持復雜的訪問模式,強大的新軟件堆棧以提高數據的可管理性和分層,以及通過計算和存儲實現無縫擴展,從而解決了這些挑戰。除了擴展之外,存儲與Slingshot網絡的直接連接消除了對大多數傳統HPC網絡所需的存儲路由器的需求。此外,由于Slingshot是以太網兼容的,這樣可以降低整個系統的成本,降低復雜性并降低延遲,從而提供更高的前所未有的應用性能和ROI。
通過將超級計算的性能和規模與云計算的生產力和完整的數據中心互操作性相結合,Cray的Shasta超級計算機,ClusterStor存儲和Slingshot互連正迅速成為億億時代的領先技術選擇。惠普正以13億美元的價格收購Cray,該交易預計將在技術巨頭2020財年的第一季度完成。這意味著HPE現在正處于億元計算競爭中,并將提供自己的存儲。Cray宣布其計算,軟件,存儲和互連功能正在為HPC和企業客戶提供產品,預計可用性將從2019年底開始 。
值得關注的是,Cray / Intel Aurora exaflopper將于2021年推出,與Frontier一樣。日本的Arm-powered Post-K exascale系統也即將到期,中國的天河-3可能會在2020年出現。ATOS為歐洲處理器計劃提供的歐盟exascale計算機預計將在2021年推出其首批系統,其中1個exaFLOPS Gen 2 GPP Cronos系統將于2022年至2023年推出。IBM也將參加exascale競賽,El Capitan也將于2021年參加Argonne領導計算機設施。屆時存儲社區將透露更多關于各大超級計算機上的存儲系統。
-
處理器
+關注
關注
68文章
19535瀏覽量
231854 -
超級計算機
+關注
關注
2文章
464瀏覽量
42124 -
存儲系統
+關注
關注
2文章
418瀏覽量
41029 -
Cray
+關注
關注
0文章
7瀏覽量
8728
原文標題:你見過1EB的存儲系統嗎?堪稱世界上最大的單一文件系統
文章出處:【微信號:TopStorage,微信公眾號:存儲加速器】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
NFS網絡文件系統深度解析
防止根文件系統破壞,OverlayRootfs 讓你的設備更安全

EE-329:在SHARC處理器上運行FAT16文件系統和DOS命令

EE-289:在ADSP-BF533 Blackfin處理器上實現FAT32文件系統

服務器數據恢復——Ext4文件系統umount失敗的數據恢復案例

虛擬化數據恢復—UFS2文件系統數據恢復案例
服務器數據恢復—EXT3文件系統下誤刪除數據的恢復案例

NetApp數據恢復—NetApp存儲WAFL文件系統下誤刪除的數據恢復案例
Linux根文件系統的掛載過程
小型文件系統如何選擇?FatFs和LittleFs優缺點比較

計算機存儲系統的構成
想提高開發效率,不要忘記文件系統

如何修改buildroot和debian文件系統

linux--sysfs文件系統

評論