近日,全球超級計算機領導者 Cray Inc. 宣布,F(xiàn)rontiersman Cray為“最大的單一文件系統(tǒng)”提供了5000萬美元的存儲合同,為美國Oak Ridge國家實驗室(ORNL)Frontier exascale超級計算機提供1 exabyte的ClusterStor存儲。
Frontier是價值6億美元的Cray-AMD exascale系統(tǒng),最高可達1.5 exaFLOPS,將于2021年交付,并于2022年驗收。它將成為ORNL 200 petaFLOPS Summit超級計算機的后續(xù)產品。
Cray憑借其在5月份由AMD EPYC處理器和Radeon Instinct GPU驅動的Shasta超級計算機贏得了Frontier競標,因此相關的存儲合同并不出乎意料。
該存儲解決方案是針對億億次級數(shù)據密集型工作負載的新設計,將基于下一代Cray?ClusterStor?存儲和Cray Slingshot?高速互連。下一代Cray?ClusterStor?存儲文件系統(tǒng)是基于Cray的Shasta?的架構,并且將作為ORNL國家實驗室的的一部分集成到Frontier exascale超級計算機。
新的存儲解決方案將由超過一兆字節(jié)(EB)的混合閃存和運行Lustre?并行文件系統(tǒng)的高容量存儲組成。一個exabyte的存儲空間是1000PB,這足以存儲超過2億個高清電影。存儲解決方案將通過Slingshot系統(tǒng)互連到ORNL exascale超級計算機,實現(xiàn)系統(tǒng)上同時運行的各種建模,仿真,分析和AI工作負載的無縫擴展。該Frontier exascale超級計算機預計將于2021年首次亮相,成為世界上功能最強大的計算機,性能超過1.5 exaflops。
與ORNL目前的Summit超級計算機的存儲相比,這種下一代解決方案,容量是其四倍以上(超過1 EB(或1,000 PB)而不是250 PB),另外和基于Spectrum Scale的存儲系統(tǒng)的2.5 TB / s相比,吞吐量將超過4倍(高達10 TB / s)。面向ORNL的新型Cray ClusterStor存儲解決方案將包含40多個存儲柜,并在兩層存儲中提供超過1 EB的總容量,以支持數(shù)據的隨機和流式訪問。主層是用于高性能臨時存儲的閃存層,而輔助層是用于高容量存儲的硬盤層。新的存儲系統(tǒng)將成為ORNL的中心系統(tǒng),該Frontier exascale系統(tǒng)將由具有ZFS本地卷的Lustre全局并行文件系統(tǒng)訪問,所有這些都在一個全局POSIX命名空間中,這將使其成為世界上最大的單個高性能文件系統(tǒng)。
ORNL的Frontier項目主管Justin Whitt透露,新的解決方案將為科學家提供傳統(tǒng)建模和模擬以及深度學習和數(shù)據科學所需的性能和容量。
HPC存儲系統(tǒng)傳統(tǒng)上使用大型硬盤陣列來滿足大量可預測的數(shù)據讀取和寫入訪問。這與人工智能和機器學習工作負載形成鮮明對比,后者通常混合使用小型和大型數(shù)據的隨機和順序訪問。因此,傳統(tǒng)存儲系統(tǒng)不適合這些工作負載的綜合使用,因為混合數(shù)據的訪問和智能高速系統(tǒng)互連的需求,可以快速地在超級計算機上移動大量數(shù)據,從而使這些不同的工作負載在Frontier exascale系統(tǒng)上同時運行。
下一代基于ClusterStor的存儲解決方案通過提供閃存和容量存儲的混合來支持復雜的訪問模式,強大的新軟件堆棧以提高數(shù)據的可管理性和分層,以及通過計算和存儲實現(xiàn)無縫擴展,從而解決了這些挑戰(zhàn)。除了擴展之外,存儲與Slingshot網絡的直接連接消除了對大多數(shù)傳統(tǒng)HPC網絡所需的存儲路由器的需求。此外,由于Slingshot是以太網兼容的,這樣可以降低整個系統(tǒng)的成本,降低復雜性并降低延遲,從而提供更高的前所未有的應用性能和ROI。
通過將超級計算的性能和規(guī)模與云計算的生產力和完整的數(shù)據中心互操作性相結合,Cray的Shasta超級計算機,ClusterStor存儲和Slingshot互連正迅速成為億億時代的領先技術選擇。惠普正以13億美元的價格收購Cray,該交易預計將在技術巨頭2020財年的第一季度完成。這意味著HPE現(xiàn)在正處于億元計算競爭中,并將提供自己的存儲。Cray宣布其計算,軟件,存儲和互連功能正在為HPC和企業(yè)客戶提供產品,預計可用性將從2019年底開始 。
值得關注的是,Cray / Intel Aurora exaflopper將于2021年推出,與Frontier一樣。日本的Arm-powered Post-K exascale系統(tǒng)也即將到期,中國的天河-3可能會在2020年出現(xiàn)。ATOS為歐洲處理器計劃提供的歐盟exascale計算機預計將在2021年推出其首批系統(tǒng),其中1個exaFLOPS Gen 2 GPP Cronos系統(tǒng)將于2022年至2023年推出。IBM也將參加exascale競賽,El Capitan也將于2021年參加Argonne領導計算機設施。屆時存儲社區(qū)將透露更多關于各大超級計算機上的存儲系統(tǒng)。
-
處理器
+關注
關注
68文章
19407瀏覽量
231177 -
超級計算機
+關注
關注
2文章
464瀏覽量
42027 -
存儲系統(tǒng)
+關注
關注
2文章
414瀏覽量
40935 -
Cray
+關注
關注
0文章
7瀏覽量
8719
原文標題:你見過1EB的存儲系統(tǒng)嗎?堪稱世界上最大的單一文件系統(tǒng)
文章出處:【微信號:TopStorage,微信公眾號:存儲加速器】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
相關推薦
防止根文件系統(tǒng)破壞,OverlayRootfs 讓你的設備更安全
![防止根<b class='flag-5'>文件系統(tǒng)</b>破壞,OverlayRootfs 讓<b class='flag-5'>你</b>的設備更安全](https://file.elecfans.com/web2/M00/10/E9/pYYBAGEfInyAb9dQAABH4pzjonI981.jpg)
EE-329:在SHARC處理器上運行FAT16文件系統(tǒng)和DOS命令
![EE-329:在SHARC處理器<b class='flag-5'>上</b>運行FAT16<b class='flag-5'>文件系統(tǒng)</b>和DOS命令](https://file.elecfans.com/web1/M00/D9/4E/pIYBAF_1ac2Ac0EEAABDkS1IP1s689.png)
EE-289:在ADSP-BF533 Blackfin處理器上實現(xiàn)FAT32文件系統(tǒng)
![EE-289:在ADSP-BF533 Blackfin處理器<b class='flag-5'>上</b>實現(xiàn)FAT32<b class='flag-5'>文件系統(tǒng)</b>](https://file.elecfans.com/web1/M00/D9/4E/pIYBAF_1ac2Ac0EEAABDkS1IP1s689.png)
服務器數(shù)據恢復——Ext4文件系統(tǒng)umount失敗的數(shù)據恢復案例
![服務器數(shù)據恢復——Ext4<b class='flag-5'>文件系統(tǒng)</b>umount失敗的數(shù)據恢復案例](https://file.elecfans.com/web2/M00/72/85/pYYBAGNSNzqAU2nXAAEm0EIImZA324.png)
虛擬化數(shù)據恢復—UFS2文件系統(tǒng)數(shù)據恢復案例
服務器數(shù)據恢復—EXT3文件系統(tǒng)下誤刪除數(shù)據的恢復案例
![服務器數(shù)據恢復—EXT3<b class='flag-5'>文件系統(tǒng)</b>下誤刪除數(shù)據的恢復案例](https://file.elecfans.com/web2/M00/6B/71/poYBAGMr1U6AOot4AAB4laMRdgw508.png)
服務器數(shù)據恢復—V7000存儲NTFS文件系統(tǒng)數(shù)據恢復案例
![服務器數(shù)據恢復—V7000<b class='flag-5'>存儲</b>NTFS<b class='flag-5'>文件系統(tǒng)</b>數(shù)據恢復案例](https://file1.elecfans.com/web2/M00/8D/64/wKgaomS6HOGAa4cnAASobP8Fp0c848.png)
NetApp數(shù)據恢復—NetApp存儲WAFL文件系統(tǒng)下誤刪除的數(shù)據恢復案例
Linux根文件系統(tǒng)的掛載過程
小型文件系統(tǒng)如何選擇?FatFs和LittleFs優(yōu)缺點比較
![小型<b class='flag-5'>文件系統(tǒng)</b>如何選擇?FatFs和LittleFs優(yōu)缺點比較](https://file1.elecfans.com//web2/M00/09/86/wKgaomb5DGSAF-VfAAC7k0BnFXQ574.jpg)
想提高開發(fā)效率,不要忘記文件系統(tǒng)
![想提高開發(fā)效率,不要忘記<b class='flag-5'>文件系統(tǒng)</b>](https://file1.elecfans.com/web2/M00/06/60/wKgZombkyvaAUaWlABZH07LDusM007.png)
如何修改buildroot和debian文件系統(tǒng)
![如何修改buildroot和debian<b class='flag-5'>文件系統(tǒng)</b>](https://file1.elecfans.com/web2/M00/FD/B9/wKgZomaeKpCAeS1mAAJr5bnMFl8719.png)
linux--sysfs文件系統(tǒng)
![linux--sysfs<b class='flag-5'>文件系統(tǒng)</b>](https://file1.elecfans.com/web2/M00/F9/A4/wKgZomaLXwqAbGxzAAAQ6QVA7SI028.png)
【服務器數(shù)據恢復】異常斷電導致UFS2文件系統(tǒng)故障的數(shù)據恢復案例
![【服務器數(shù)據恢復】異常斷電導致UFS2<b class='flag-5'>文件系統(tǒng)</b>故障的數(shù)據恢復案例](https://file.elecfans.com/web2/M00/98/31/poYBAGQRYQmADmuGAAGR5s-EmYs121.png)
評論