圖:Commvault北方區技術經理董劍波

以下是董董劍波演講的精彩內容:

董劍波:大家下午好,我是Commvault北方區技術經理董劍波,我相信在座很多各位同仁參加了上午的會議,我有幸聽了一部分,上午部分大家領略到大數據的最新趨勢包括整個行業的發展,今天我們這個論壇更多關注大數據我們如何應用幫助企業做好數據管理,做好最核心的數據價值方面的變革。變革這個詞大家應該在今天會場說很多人都在講,大家也在關注,硬件商也有很多變革,很多在講固態盤、CSD,軟件商也是包裝成盒子在銷售,一體機。我介紹一下我們如何在大數據的背景下去保護企業中最核心最關鍵的數據的部分?;旧衔疫@個演講包括四個部分。簡單前面跟大家分享來自IDC包括大數據分析統計的信息,和大數據在行業應用和應用特點。第二部分就是大數據的應用實踐,我們關注在企業管理,如何幫助企業做好基于大數據下完整的企業管理方案。全球Commvault做了很多大數據的案例跟大家做一些分享,最后是簡單公司的分享。

大家有沒有了解過IDC數字宇宙的調查,在全球范圍內收集目前數據量有多大,中國市場大數據量到底有多大?大家都在講大數據,都在講四V,各個環節各個角度去看,數字宇宙從量上分析。從2012年到2020年這是一個預測,2012年數字宇宙整體規模全球范圍達到364EB,過十幾年以后這個數據成長到8600個EB,這個是一個什么概念?如果把8600個EB做成一本,這本書的厚度是地球到冥王星距離的30倍,達到1500億公里。還有一個數據增長,按照IDC預測每年有50%,國內有些客戶持續增強不止是50%,尤其做BI和平安城市,智慧城市這個數據成倍的增長。中國從2012年13%會占到全球的21%,這是IDC的預測,可以看出中國在大數據領域的地位也越來越重要。

另外一個維度我們看看在哪些行業,我們論壇是行業論壇,大數據加行業論壇,這個論壇里面我們了解一下行業應用有哪些?第一將近40%多的大數據應用在數據分析。各個行業、各個政府,包括企業都在做BI精分,其次是服務創新,越來越多的企業關注如何把服務做好,利用云服務,虛擬化的服務給用戶提供完整創新的服務管理。第三部分在銷售數據分析方面,這個大家親身有感受的,明天又是雙12,雙11大家知道京東、淘寶創了歷史最高,這些公司都會基于這些數據做分析,做銷售機會分析和用戶行為分析,這些方面都是導致大數據增長非常重要的誘因。還有一個維度我們關注一下大數據到底是什么類型的數據?包括我們公司包括在座很多關注在大數據領域的公司或者用戶非常關注的,它到底是什么類型?我們數據類型是結構化、半結構化、非結構化。數據類型最多是非結構化的,一些文本的信息,一些郵件、表格現在大家用的微信這些及時消息,QQ這些都會是大數據里面最主要的一部分。其次是結構化的數據,交易數據、視頻、音頻,大家建設平安城市之類可以帶來視頻音頻爆炸式的增長。我分析這些數據最終希望引入今天我們介紹的一個重點,我們看看在這樣大數據的背景下幫助我們企業管理好我們數據,使我們數據價值發揮出來。有了我們前面看到EB級的數據,我們看看體面最重要的是什么?數據保護。企業花了很多費用人力、物力成本建設一個大數據的應用,他希望從里面挖掘價值,他希望看到幫助它企業成長非常有價值的數據,這些數據非常關鍵,怎么保護好?在有限備份資源做好保證數據的可用性,這個一定是給大家大數據給企業帶來的改變,一定重新考慮現有備份的系統。我做了數據管理數據備份的技術,跟很多客戶溝通的時候客戶都會提出來一個問題,我數據做了很多備份,每年每天都在做,這些數據是不是有效,真正我想用的時候能不能完整快速恢復出來,這個是客戶的困擾,這個數據有效的驗證,大數據報告,這是最直觀的內容。最后就是電子備份,很多公司上市以后面臨行業和法律上審計,這時候有效數據能不能長期保存,以低成本的方式保存,這是應對合規非常重要的一部分。

我介紹一下我們大數據里面的最佳實踐。傳統上客戶怎么做?我們無論現在這個背景下還是之前客戶考慮結構化數據和交易數據,客戶怎么保護的?像我們人類進化一樣,早期客戶使用磁帶磁盤這些技術,現在用一些去重、快照、鏡像,現在數據量越來越大,客戶對價值速度越來越高的時候,這時候需要引入新技術,包括數據去重、快照、鏡像等等。目前這些技術應用有什么問題?相對來講比較混亂,很多客戶就是像跟我們中國現狀一樣,發現多個版本多個時代的技術共存就像往前跑的轎車,捷達這種汽車中國十幾位的銷售量,國外十幾年就更代了。很多企業在用磁帶,還有一些新企業使用VTL,包括去重,快照、鏡像的技術。這么大的成本中心怎么降低運維的成本,如果你太多復雜的應用,復雜硬件各種設備混在數據中心里面,管理問題是非常大的挑戰。每年對不同設備進行擴容,包括去維護等等,這些成本的問題。

如何簡化傳統數據管理帶來的一些問題,今天我們介紹一款今年2月份10.0里面發布一個非常好的技術我們叫做onepass,什么概念就是傳統的數據保護技術需要多個流程,你做備份需要做檢索,搜索哪些數據我要做備份,做數據拷貝、移動后期生成索引,所有這些部分都會以后造成影響。經過我們IDC的分析,非結構化數據的增長遠大于結構化數據,非結構化數據怎么管理?很多時候需要引入歸檔的數據,把歷史的數據離線出來放到磁帶、微貼、或者存儲在云里面做低成本的保存,這會給企業降低IT管理成本,信息化的成本,這樣應用多要有流程,這些流程多次重復的操作。很多企業有微中心異構環境,他希望我們有沒有視圖統一了解,現在汽車很多都有OBD,這個里面狀態是不是好的,有沒有故障他希望一目了然,并不是希望每個人員去檢索,那種效率很低,所以重復的工作非常多對IT生產和服務器壓力非常大。今天我要做的事情是我把所有客戶關心的數據流程同步化,我一次性數據檢索、數據收存,我就清楚哪些我要長期保護,哪些數據離線出來放到我磁帶或者云上面,降低我主存儲的成本,最終我可以生成存根和報告,讓用戶很清楚我到底企業有多少數據量這些數據保護功能怎么樣,有這樣的功能之后對企業來說數據保護才是完整的。

使用onepass使我們數據保護數據分析變得更加容易。我們有一個統計基本上可以結合我們onepass技術幫用戶降低90%的成本,把原來窗口降低50%,降低管理負載30%左右。

我傳統的方式也可以正常工作,如果你數據達到幾百個TB,幾個TB這樣級別就是要用新技術,onepass可以降低我們操作窗口降低我們成本。

同樣一個技術就是虛擬化的,包括很多制造業,高校都在使用虛擬化平臺。這些虛擬機越來越多造成什么問題?我聽到很多客戶跟我抱怨說他們之前買了一個非常大規模的存儲,本來計劃可以用五年,但是發現上了虛擬化以后這個存儲非??焖俚谋粦昧?,他們分析哪些是我常用的,哪些建了以后我一個月兩個月使用,這種情況在很多企業是普遍的。這個問題怎么解決?今天我們有一個技術也是非常創新的技術,就叫做onepassfor vm。你建幾十臺虛擬機,建了以后這些虛擬機開著,也沒有利用它浪費了資源。我不經常訪問的虛擬機,超過一個星期CPU利用率持續低于5%,磁盤I/O的利用率低于10%,這種虛擬機就沒有用的,我可以遷移出來挪到別的平臺,騰出來的空間我放我的熱數據。今天我們解決更上層的管理,你應用怎么部署?你虛擬機如果是冷置、閑置的狀態你可以從陣列里面移出來,放到別的平臺,這樣你成本會降低很多,幫助IT極大化的降低成本。我們很多客戶應用到虛擬機生命周期管理的技術,給他帶來最大價值是說原來我預計這個存儲可以使用5年,他發現用了onepassfor vm可以使用10年甚至更久,反過來如果他預計5年時間,可能一兩年就不夠了,需要昂貴的擴容成本,這是我們給企業帶來的價值,成本降低,可以快速恢復降低TCO。

接下來我們介紹一個比較主要的技術我們叫做關聯拷貝,關聯拷貝個是我們最近發布非常新的技術。我們看一下IDC的分析,將數據的價值給摘要出來,數據增長很快每年50%以上的增長,真正對企業來說有價值的數據并沒有那么多,有價值數據目前IDC給的數據只有30%所有。中國大數據的現狀雷聲大雨點小,大家都在吼我做大數據,真正做好的小于0.5%。我們現在考慮一個問題大數據如何管理如何保護的問題?我們不可能把幾個PB、EB的數據都保護出來,今天我們做什么,我們保護價值數據。有關聯拷貝這個數據之前我們看看傳統上怎么做的?傳統上做數據容災同時把所有數據一股腦的拷貝走,很多企業建多機房,租用IDC的云中心,他們做的事情把文件所在的硬項拷貝走,你最多是33%有價值數據,但是你現在保護100%的數據,很多數據是垃圾數據你也放到昂貴云中心,磁帶庫里面占你空間,這是對企業來說不有效的方案,我們有效的管理數據就是建立關聯拷貝的技術,我基于你真正存儲有價值的數據,比如說我有一個大的文件服務器,有不同時期項目文檔,哪些文檔最重要,我把這些數據剝離出來放到我們移動中心里面,包括很多IDC都在運營云,有一個空間你可以去租用,亞馬遜中國沒有落地,我們中國看到華為、電信在落地,落地以后空間租賃按照容量,一個TB多少錢?一個TB標準的價格將近一萬塊錢租一年的成本,這是一個空間成本。很多企業為了降低數據管理成本降低這種空間。我們做基于內容的拷貝恰恰可以幫助客戶節省很多成本。我之前10個TB全部考到云里面,今天我挑對我企業重要的數據放到云里面,那今天我的成本只有1/3或者耿紹的成本,我放少了我網絡帶寬包括PC都是一個很大的節省。怎么做到這一點?傳統軟件做不到,今天只有onepassfor vm關聯拷貝能做到。我們這里面挑了幾個行業應用重點大家分享一下。

第一個是工程公司,大家風風火火的建高鐵,高鐵里面包括像設計、做研究的,包括很多公司做高鐵方案他們有很重要信息是什么?他們的圖紙他們的稿件,他希望我有多份存儲和拷貝,十年二十年以來我拿出來還可以參考。你文件100個TB我只挑你中間重要的數據離線出來放到我專門的設備里面這樣可以降低你的成本我就放你其中最關鍵數據,這是一個應用特點,或者基于項目,基于格式我們可以挑選出來關鍵字自動的存放。

第二金融行業,包括金融電信都在做什么?做合規。合規的項目意味著需要對企業相關人員進行審計,尤其是經理主管人員,我公司要上市你所有主管人員每天收發郵件要審計,你處理文檔要審計,怎么審計?把這些數據拷貝出來用于后期的人做審計。我們有了關聯拷貝,企業只需要對近三年近一年某一些用戶數據接收郵件進行獨立保存就可以,這樣可以大大節省存儲成本。

第三面向云服務的使用者我們可以更少的降低云使用成本,因為我只放我最關心的數據。這是我們關聯拷貝技術最主要的應用方面。

如果你做一些正常的備份,備份完之后做備份容災你可能需要非常高的一個成本,這里面有一個估算的方法,正常是綠色的線需要這么多成本存儲數據我們例子是三年100個TB的數據放在云里面,紅色是使用去重,重復數據刪除,這個降低60%到70%的存儲成本。今天我們講的onepassfor vm,我們關聯拷貝它實際上比去重更降低成本,因為它只挑選最核心的數據拷貝出來,我們大概不到10%的成本,相對于去重是10%到20%的成本,這樣企業IT管理成本,數據管理成本大大降低了。我們這里有一個統計可以節省94%的費用,85%的存儲成本,提高90%的處理效益,這是關聯拷貝給企業帶來的價值,尤其是用于一些大數據的應用成本。

接下來有幾個案例跟大家分享一下,其中一個案例是我們在全美最大云服務提供商Rackspace,這個公司在美國運行七個獨立的數據中心,大概有五萬多個客戶在使用,這個比較早的數據現在大概超過6萬的數據了,他全球使用onepass的產品,為他云服務客戶提供每天備份,這是真正大數據備份場景每天備份量在一個PB,總共備份量超過了50個PB,他用我們去重、關聯拷貝的技術。每天運行備份作業差不多七萬個,非常大的級別。這個客戶使用關聯拷貝的技術以后平均備份成功率達到99%,你每天可能有七萬個作業在運行,幾十個作業可能有點問題,這一點問題可能由于網絡原因,你備份設備問題造成的,平均來講業界做備份,國內的用戶,包括全球的用戶我們統計平均的成功率是70%左右,我們達到了99%,這是我們幫助客戶提供云服務的備份。

中國經過這么多年我們做了兩千多家各個行業的客戶,這里面包括運營商的客戶,也有一些石油石化的客戶,還有我們做的金融行業以及政府、制造,這里面其實互聯網行業用戶也有很多,百度、淘寶、騰訊也在在用Commvault的產品,用了很多年,馬上的雙12,他們后臺運行龐大阿里云的系統那就是通過Commvault的產品做支撐。這是真正到了大數據的規模,我們這個行業拿下了幾個大互聯網的公司。

最后一點時間給大家簡單介紹一下Commvault,Commvault是創新型的企業,公司成立是在1996年我這邊拿一組數據來講,1996年在貝兒實驗室內部應用后期我們獨立出來作為一個公司運營,我們全球員工超過1900名,我們在做一個數據管理的平臺,所以我們是非常專注的公司,這樣的公司可能也是全球獨家的,只有我們一家公司這么專業做數據管理的軟件。1萬9000是我們客戶的統計,大部分客戶分布在全球一千強里面的客戶遍布在各個行業。96%遠高于客戶滿意度的情況,平均客戶應該在80%左右,我們達到了96%,我們非常關注用戶體驗。此外IT行業這些年大家都知道很多大公司發展不景氣,年底這段時間很多公司有很多裁員很多風波,看看Commvault過去六年時間我們持續增長,每年平均符合增長率超過20%,大概在25%左右,這是為數不多的IT公司可以做到這么高速的增長,類似像威爾等幾家公司。納斯達克上市我們2005年納斯達克上市,我們全球就一款產品也是自主研發我們市值將近35億美金。中國我們2005年進入今年運營了八年時間,我們各個行業有很多成功的應用,目前為止在北上廣成都我們有自己辦事處,北京我們作為分公司獨立運營,我們北京設有技術中心和培訓中心,面向我們客戶,提供一些遠場的服務。

我們接下來的這組報告關注公司,Commvault每年對數據管理類的公司在Gartner排名,我們連續三年獲得全球排名第一的數據備份公司。我們更多貼近大數據包括云發展的需求有非常多創新和變化。

跟我們友商相比Commvault有什么優秀技術?希望通過這張圖大家可以了解一下,像Simpana這些都是最主要數據管理和備份的軟件,為什么給Commvault這么高的評價?最主要原子于我們創新設計理念,我們都是一體化的產品,我們只有一款產品可以滿足企業在大數據環境下各種各樣的需求,數據歸檔、去重、云備份數據等等我們把所有功能模塊集成到底層平臺里面,目前這個公司只有Commvault,大家都是通過不斷的整合,他們很多技術很難集成在一起,對客戶來說運維、采購成本成倍增長,Commvault自始至終維護一個產品就可以了,我們技術相對應用更簡單更實用更有創新。這也是業界第三方評估機構給Commvault好評價的原因。

我們前面講的結構化,增長最快速非結構的數據包括一些應用一些桌面機,對于Commvault來講我們通過commvauit一體化信息管理平臺來做。我們備份功能統一化,無論是云還是虛擬機各種應用我們存在統一的管理平臺,這個平臺可以做備份分析,可以提供客戶數據分析,我們做長期保留有很多不同策略給用戶提供各種報告做合規做審計,所有的功能我們集成在這個產品,給面向大數據和云服務的客戶提供支撐。

這包括像onepass等等,跟云平臺結合我們認證了十幾家主流的云平臺,包括EDGE、NAS、MAIL、FILE等,主流技術都可以跟Commvault集成進來。這是我的郵件希望大家關注Commvault關注大數據的用戶可以隨時跟我們聯系,希望大家在數據管理這個層面我們多一些交流,我們今天介紹就是這些內容,主要希望大家多了解一下在大數據的環境下有Commvault的公司,我們提供非常先進的技術應用行業各個管理的范疇,謝謝各位。

更多詳情請關注專題直播

未經允許不得轉載:存儲在線-存儲專業媒體 » 董劍波:新數據時代需轉變管理模式
分享到

lixiaofei

相關推薦

精品国产午夜肉伦伦影院,双性老师灌满浓jing上课h,天天做天天爱夜夜爽,攵女乱h边做边走