華為OceanStor V3:為用戶描繪一副數據自動流動的優化畫卷

月之暗面 發表于:15年01月10日 14:39 [原創] 存儲在線

  • 分享:
[導讀]存儲經過多年的發展,存儲性能和數據管理是不可回避的兩大話題。存儲性能問題隨著閃存在存儲系統中得到使用而逐漸得以解決,不過數據管理依然是橫跨在廣大用戶面前的難題。尤其是隨著閃存技術日漸開始走向普及,用戶數據中心的存儲環境變得更加復雜,異構存儲、混合存儲、數據備份等問題持續困擾著用戶,數據走向智能化和流動化的方向已經勢在必行,這也是存儲廠商們多年來一致努力的方向。

存儲經過多年的發展,存儲性能和數據管理是不可回避的兩大話題。存儲性能問題隨著閃存在存儲系統中得到使用而逐漸得以解決,不過數據管理依然是橫跨在廣大用戶面前的難題。尤其是隨著閃存技術日漸開始走向普及,用戶數據中心的存儲環境變得更加復雜,異構存儲、混合存儲、數據備份等問題持續困擾著用戶,數據走向智能化和流動化的方向已經勢在必行,這也是存儲廠商們多年來一致努力的方向。華為新一代融合存儲OceanStor V3自推出以來,主打的理念就是讓數據自動流動起來,通過閃存與硬盤的融合讓數據能夠更具應用需求來回自由移動;而主存儲與備份的融合則讓用戶大幅簡化過去傳統的備份體系結構,實現了數據從主存儲到備份系統的自動化流動;異構存儲管理功能則完美簡化了數據中心異構存儲之間的互通難題,實現了數據在異構存儲之間的管理與流動。用戶通過華為OceanStor V3可以在數據中心描繪出一副數據自動流動的優美畫卷。

自動分級讓數據自由流動

毫無疑問,隨著閃存在存儲系統中得到越來越廣泛的應用,閃存與傳統機械磁盤之間的數據移動成為存儲系統中技術含量較高的領域。當前閃存成本仍然處于較高水平,全閃存陣列這類型的產品仍然是少數用戶的“專屬”,混合陣列仍然是廣大用戶的首要選擇。因此,在混合陣列中的不同存儲介質之間的數據來回流動就顯得非常重要。因為,用戶應用隨時都是在變化的,所以不同類型應用的數據隨著時間變化它的熱度也會產生一系列的變化,只有通過自動分層技術根據數據的熱度而合理的分布在不同的介質上,才能發揮在性能和成本直接達到最佳的效果。

事實上,自動分級的存儲技術也已經出現多年,市場上的技術也是良莠不齊,在目前來看,自動分級技術是否出色主要體現出對數據熱點的判斷、數據遷移顆粒度大小、數據遷移模式等。華為OceanStor V3系列存儲的自動數據分級功能SmartTier是對存儲系統LUN級別的智能數據分級,數據遷移顆粒度達到了512K-64M,SmartTier自動分級功能主要分為性能統計、性能分析以及數據遷移三個階段。


圖一:華為SmartTier處理數據的三個階段。

V3存儲系統的性能由存儲系統的IO監控模塊完成。SmartTier允許自定義IO監控的時間段。而性能分析則是由V3存儲系統的數據排布模塊完成,性能分析階段使用性能統計數據進行性能分析,分析結果會對存儲池中的每個遷移顆粒排名, _排名由高至低,從同一個存儲池中的最熱顆粒開始,直到最冷顆粒(排名僅在同一個存儲池中進行),最終生成數據遷移方案。

數據遷移則是由V3存儲系統的遷移模塊完成,SmartTier擁有兩種遷移模式::手動觸發遷移模式和定時觸發遷移模式。手動觸發的優先級高于自動遷移。手動觸發遷移模式可以根據需要立即觸發遷移,定時觸發遷移模式是根據事先設定好的遷移開始時間和持續遷移時段來自動觸發遷移,可以事先設置每周的哪些天的什么時間開始觸發遷移及遷移允許持續的時長。此外,SmartTier 可設置高中低三檔遷移速度,進行遷移的動態控速。其中,低檔遷移速度上限為10MB/S,中檔遷移速度上限為20MB/S,高檔遷移速度上限為100MB/S。 _

V3存儲系統的自動分級技術非常符合當前數據存儲的需求,尤其是閃存與傳統硬盤融合的趨勢下,V3很好地滿足了對于數據分級的自動化、顆粒度細化、智能化的要求,已經成為當前市場有著很強競爭力的存儲優化技術。

主存儲與備份融合:實現數據備份自動化

數據保護與數據備份在數據中心中是不可或缺的一環,而在傳統數據中心架構中,備份服務器、備份軟件以及備份存儲組成的傳統備份網絡體系往往是復雜和昂貴的。改變過去復雜備份體系架構已經是大勢所趨,我們也可以看到從2014年開始,主流存儲廠商的存儲系統產品中都加強了與備份系統的直接聯系,主存儲與備份的融合被認為是解決傳統備份過于復雜的辦法之一。在華為OceanStor V3存儲系統中我們也看到了這種趨勢。


圖二:OceanStor V3實現了從主存儲直接將數據備份到備份系統。

眾所周知,隨著數據增長呈現出爆炸性的增長,傳統存儲備份體系架構的壓力也是越來越大,備份路徑和備份窗口時間過長使得傳統備份體系架構在當前備受詬病。華為OceanStor V3存儲系統跳過傳統備份體系架構,通過主存儲操作系統OceanStor OS中的備份模塊直接以快照的形式將數據備份到備份存儲中,實現了從備份數據的自動化,大幅降低了數據備份與保護的復雜度以及成本,很好地實現了從主存儲到備份存儲的數據流動。

異構存儲管理:讓異構環境下的數據自由流動起來

在存儲管理中另外一大難題就是對于異構存儲的管理,不同存儲廠商的存儲系統對于SCSI協議理解和遵從都不一樣,造成了異構存儲在兼容性和數據管理方面具有巨大挑戰。甚至同一廠商,由于高中低段存儲產品線不是同一套操作系統而也會出現不兼容的情況。而且,用戶數據中心不可能只存在某一家存儲廠商的產品,異構環境是用戶們的普遍狀態。因此,讓異構環境下的數據管理能夠自由化、智能化就成為當前存儲系統的發展趨勢。

華為OceanStor V3異構虛擬化技術通過針對不同的陣列做兼容性的差異化處理,能很好的識別和處理與異構設備間的各種兼容性問題,如及時識別和處理異構設備的LUN PATH 故障,以此達到與異構陣列間高可靠的兼容。異構虛擬化技術通過后端多路徑軟件支持以多路徑冗余方式連接異構陣列,防止與異構陣列間的物理鏈路連接出現因為單個鏈路故障而導致業務中斷。


圖三:典型的異構存儲環境。

目前來看異構存儲環境下的數據管理非常有必要。首先,用戶通過長期的數據中心建設,存在著大量不同品牌的存儲系統,利用好這些異構存儲系統資源勢在必行,如果不能很好地實現異構存儲管理的話,則不能夠讓數據中心存儲資源得到有效使用;其次,隨著存儲系統服役時間的推移,在某個時間點可能不能再滿足業務發展的需求,異構存儲系統之間的數據搬遷就成為首要問題,華為OceanStor V3可利用異構虛擬化LUN在線遷移功能實現異構存儲系統之間的LUN數據遷移;第三,用戶數據中心可能由于數據站點的陣列來自于不同的異構廠商,導致異構陣列間的數據無法做到互為備份。華為OceanStor V3的異構虛擬化提供的異構同步和異步復制功能,可以使異構陣列間的LUN 數據做到互相備份,做到站點間的數據容災;第四,異構陣列可能存在LUN被病毒或者其他原因造成的數據損壞情況,華為OceanStor V3異構虛擬化能夠提供異構快照技術,可以為異構存儲系統提供快照備份,實現異構環境的數據保護。

總體而言,華為OceanStor V3系列存儲系統在數據管理方面代表著當前主流存儲系統發展的方向,通過融合閃存與硬盤、主存儲與備份、異構存儲等,實現數據中心存儲層的數據管理高效化與簡單化,用戶能夠實現數據的自由流動以及IT架構的簡化,可以說以華為OceanStor V3為代表的存儲系統將來會給整個數據中心的數據管理帶來革命性的變革。

[責任編輯:朱朋博]
Memblaze在過去的一年里被越來越多的國外國內媒體所關注,被越來越多的技術界和投資界的人所熟知,他是一個國產初創明星企業,技術發展方向明確,成果顯著,一次又一次的融資讓這個以八零后為主的創業團隊規模迅速壯大,他在剛過去的一年內因獲得國內60%的PCIe閃存市場份額而被推上了企業級閃存市場第一的寶座,一時間關于上市的討論又開始浮出水面。
官方微信
weixin
精彩專題更多
華為OceanStor V3系列存儲系統是面向企業級應用的新一代統一存儲產品。在功能、性能、效率、可靠性和易用性上都達到業界領先水平,很好的滿足了大型數據庫OLTP/OLAP、文件共享、云計算等各種應用下的數據存儲需求。
12月15日,中國閃存聯盟成立,同時IBM Flash System卓越中心正式啟動
DOIT、DOSTOR、易會移動客戶端播報中國存儲峰會盛況。
 

公司簡介 | 媒體優勢 | 廣告服務 | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯系我們 | 會員注冊 | 訂閱中心

Copyright © 2013 DOIT Media, All rights Reserved.

精品国产午夜肉伦伦影院,双性老师灌满浓jing上课h,天天做天天爱夜夜爽,攵女乱h边做边走