數據存儲產業服務平臺

新型存儲基礎設施助超級計算機超級運算

DOSTOR存儲在線 5月28日國際報道:國家超級計算機應用中心推出了一個存儲基礎設施,包括380PB的磁帶容量和由17000個SATA硬盤組成的25PB的在線磁盤存儲。

大量的存儲設施設計用于支持一個世界上最強大的超級計算機,稱為“藍水”。由國家自然科學基金(NFS)委任,藍水預計會有11.5千萬億次每秒的峰值性能,雖然國家自然科學基金提出的規范要求為1千萬億次的持續應用計算能力。

國家超級計算機應用中心,坐落于伊利諾伊大學,已與Cray簽訂合同建立超級計算機。該系統將運行一個Lustre并行文件系統,每秒超過1TB的吞吐量送到其終端存儲器上。

“藍水”項目將建造一個1千萬億次的超級計算機,處理現實世界的科學和工程應用。它還有助于理解宇宙大爆炸之后如何演變,幫助預測颶風和龍卷風的成因,并在原子級新材料的設計上發揮其作用。

超級計算機是由超過235個Cray XE6機柜組成,采用380,000個AMD Opteron 6200 Series x82處理器和超過30個機柜的最近宣布的帶有3000個NVIDIA GPU的Cray XK6超級計算機的未來版。該系統將包括有190,000根內存條組成的1.5PB的內存。

為了支持所有這些計算能力,國家超級計算機應用中心使用Cray Sonexion存儲系統部署了25PB的磁盤存儲。Sonexion是Zyratex存儲陣列的再創品牌。該系統通過一個40Gb每秒的Extreme Networks以太網提供了1TB每秒的總帶寬。

“我們一直在和網絡供應商密切合作來確保他們準備好實施40Gb以太網”,國家超級計算機應用中心的負責存儲和網絡工程的高級項目經理米歇爾·巴特勒說,“我們不是最先使用40Gbps以太網的,但我們是少有的幾個之一。”

使用40Gb以太網的關鍵是瓜分多個10Gb以太網通道的能力,使國家超級計算機應用中心可以通過多個端口傳送信息,巴特勒說。以太網將用于連接大約75個主機。

國家超級計算機應用中心還選擇了DataDirect網絡的SFA 12K存儲陣列,提供100GBps的存儲性能來對“nearline”磁帶庫系統卸載數據。磁盤子系統可擴展至500PB的容量,巴特勒說。

“子系統必須能夠卸載百萬兆字節每秒的文件系統,因此我們需要一個非常大的磁帶驅動器設備”,她說。

在主要存儲以外,還有四個Spectra Logic 17-frame T-Finity磁帶庫,將有366,240MB/秒的IBM TS1140企業級磁帶驅動器。這些磁帶庫將提供每小時2.2PB的總讀/寫速率。

“實際上無論是LTO-5或LTO-6還是TS1140我們都評估了。我們沒有指定的磁帶驅動器,庫或任何東西。我們希望供應商有更大的自由來給我們提出多種解決方案”,巴特勒說。

巴特勒說國家超級計算機應用中心選擇IBM磁帶驅動器而不是更流行的中型的LTO驅動器,原因是他們提供了更優越的性能。TS1140提供了240MB/秒的吞吐量,相比之下LTO僅為140MB/秒,她說。

在需求建議中,巴特勒的團隊強調了10至15個存儲供應商要滿足的要求。除其他外,他們規定磁帶庫必須符合一定的面積,不能超過一定的功率還有散熱的要求,并應滿足一定的可靠性和性能指標。

巴特勒說磁帶庫總吞吐量的目標為100GB/秒。目前,它就在89.5GB/秒左右。

Cray超級計算機通過Mellanox IS5000 InfiniBand交換機和ConnectX InfiniBand網絡適配器連接到其磁帶庫。交換機使用InfiniBand QDR協議,提供了每通道多達每秒8Gb的吞吐量,而且多達12個輸入/輸出通道。巴特勒說她想使用更高帶寬版的InfiniBand, FDR,但Cray的系統不支持。

InfiniBand FDR,提供每通道高達13.6Gbps的吞吐量,也就是12個輸入輸出通道163.6Gbps的總吞吐量。

雖然國家超級計算機應用中心可以從各種企業級磁盤存儲供應商選擇用于超級計算機的產品,但巴特勒和她的團隊認為如果全選Cray會得到更好的支持。

“正如你可能知道的那樣,Lustre不是很容易照看與維護,所以我們想與一個特定的軟件和硬件供應商合作,并且能有做失效備援的和諸如這類棘手問題的設備。而且,我們2003年就開始使用Lustre了”,巴特勒說,“所以我明白Cray試圖為我們簡化系統。”

未經允許不得轉載:存儲在線-存儲專業媒體 » 新型存儲基礎設施助超級計算機超級運算
精品国产午夜肉伦伦影院,双性老师灌满浓jing上课h,天天做天天爱夜夜爽,攵女乱h边做边走