我一直都是這個態度，而且存儲發展的趨勢也很明顯：不論你使用什么應用，使用的是云，Hadoop或文件系統，裝備才能決定你的未來。如果你遇到存儲問題，至少會有一家供應商能為你提供解決方案。
不論是在企業內部還是面向公共云，數據中心的加固都是目前IT行業的重要部分。所以，你應該做些什么確保以后找得到工作呢？
我的建議：設備跟上潮流。
當公司選擇把IT架構全部或部分外包出去時，是因為有人可以從中獲利。我所聽說過的IT外包利潤高達25%。問問你自己為什么其他公司或云供應商可以買下所需的硬件和軟件之余，公司內部IT部門還可以獲利。從我以往的觀察來看，部分是因為公司內部政治通常會降低數據中心的效率。每個部門都想按照自己的方式做事。
但是設備模式不會按照人們的主觀想法來改變，它只會按照企業的結構模式來改變。
我想通過這篇文章談談你應該了解的一些設備及其差異，好讓大家未雨綢繆。如果你的IT架構像壁爐管道，沒有對存儲，虛擬化和運算進行分區，那么就需要在未來幾年迅速對此環境做出改變。另外，你可能正在找新工作，因為一些供應商們正通過外包，IT合同或轉交給云供應商的方式將你的環境變得更為新潮。
我的觀點是，你需要好好計劃，充分準備。我們先說說你需要熟悉的幾種設備。
Hadoop 設備
這類設備可分為三種：
1.標準Hadoop
2.共享型文件系統Hadoop
3.快速存儲Hadoop
標準Hadoop
如果是一個標準設備，你可以為Hadoop購買預加載和配置好的節點以及優化過的硬件。
你可以從很多供應商那里購買這類軟硬件。某些情況下，你還可以只是為集群購買軟件，而在其他情況下，則是從軟硬件優化的廠商那里購買。不論何種方式，這都是具備三方復制，帶有預配置軟硬件的標準Hadoop。
共享型文件系統Hadoop
共享型文件系統設備通常具備Lustre或GPFS文件系統，它們可以優化Hadoop的清洗階段（Shuffle Phase）。此法之所以奏效是因為可從全球的節點讀取數據，而不是一定要跨網絡讀取或分布。所有的節點都依附于共享型文件系統，可從存儲的地方直接讀取數據，無需從服務器進入網絡，再返回服務器到存儲。
用這種方法處理某些問題，比標準的Hadoop配置方法快速。此外，還保障了RAID的可靠性和故障轉移。供應商們的可靠性案例顯示，如果是RAID，就不需要三方復制。
快速存儲設備
很多供應商都已經具備或是正在開發用于Hadoop的SSD設備。他們的隊伍會越來越壯大。這些設備都是被優化過的，易于管理。
哪一個最好？
當然，答案取決于數據的數量和類型，有多少數據輸入以及正在執行幾項查詢。搞清楚這些問題有利于你的選擇。
大型文件系統設備
目前，有兩個不同的大型共享型文件系統被用于大型存儲設備–GPFS和Lustre。很多供應商們都在生產這些設備。Lustre是一項開源項目，而GPFS則由IBM出品。
這些文件系統的擴展性能遠超當前NAS供應商的產品。兩個文件系統都可以擴展到數千客戶端，傳輸速度可達每秒幾百GB。什么樣的NAS供應商在可擴展的單獨域名空間中擁有30+PB呢？
問題是，從很大程度上說，這兩個文件系統都是按照大型數據塊的需求和用戶的連續I/O設計的。這并不是說不能對軟硬件進行配置，使其支持更小的數據塊。我并不是說小型數據塊的性能比NAS機箱要好，但或許你想搞清楚這些問題，以顯示你的共享文件系統有多神奇。
1.從以下方面了解你的工作負載：
- 同一時間有多少I/O請求？
- 讀取速率和讀取請求的規模是多少？
- 一次開放或創建的載荷有多少？
- 需要多少存儲？
2.向供應商詢問端到端的可靠性。
- 是否使用了ANSI T10 DIF/PI？
- 是否使用了其他方法？
- 是否使用校驗和或錯誤校驗代碼？
- 供應商如何告訴你錯誤導致錯誤發生的磁盤是哪一個？
3. 詢問供應商關于RAID重建的事情。
- RAID是否交叉存??？
- 重建需時多久？
- 重建時，運行性能怎樣？
- 在選擇這類設備的時候，這些問題都要好好思考。隨著擴展的進行，還需要確認是否有什么狀況會影響你完成任務。
其他設備
現在市場上有很多數據分析產品和數據庫產品，可能其中有些能滿足你企業的需求。這些新設備或許能以某種方式將信息關聯起來，或是使用圖譜分析尋找關系。
這類事情都是一致的：如果你無法在本地更快速更經濟地完成，就得把任務外包到云中。
我們的工作岌岌可危
如果CIO和公司員工不遵循計劃，那總會有人遵循。那個時候，就會有人取代你。
我在日本測試一款新設計的文件系統時，我最好的朋友就告訴我“我們要吃壽司，不然我們就會變成壽司”。意思是你要么隨著這股潮流改變，要么等著被拍死在沙灘上。
市場上推陳出新，我們就要與時俱進。管理也應該納入這一進程，這樣才能實現高效。
否則，就等著把工作外包到云中或是給其他企業把?，F在有很多新技術可以解決新問題和舊問題。我們要熟悉這些技術才能生存下去。
我想，很多我們現在看到的存儲技術都將成為專用設備。雖然目前90%的數據訪問都是通過POSIX系統接口，另外10%則通過對象接口，但是在未來十年，這種情況會發生改變。
要做好準備，還記得那時候的我們從專屬大型處理器過渡到DEC，MIPS，英特爾等廠商生產的微處理器嗎？這次將和上世紀90年代微處理器帶來的改變類似。
