上海天璣數據公司總經理 董唯元 主題演講《融合基礎架構的思考》

我這里要跟大家匯報的是融合基礎架構，其實不光是存儲，這個概念是最近非?；鸬囊粋€概念，其實它的來源或者內生的原因也很簡單，今天IT系統數據中心已經復雜到非常麻煩的程度，任何一個運營商的機房，任何一個銀行的數據中心要想成功的維護它，你可以算算你的維護團隊有多少人，如果要成功維護一個數據中心需要多少種認證，事實上我們在浙江移動、江蘇電信幾個單位那兒統計過這件事，絕對是一百家，需要有一百多種認證，這個細分拆開來看其實一百多種認證還不夠，還需要更多的。

今天很多大型數據中心維護已經分成兩波，一波管維護一波管架構。事實上今天一上午各位介紹很多新潮前沿的技術，包括前幾年出現虛擬化分布式軟件定義等等，增加靈活性擴展性等等，但是它同時讓你基礎架構層次會更多，讓你基礎架構系統里邊的關系會更復雜，維護一個今天的數據中心基礎架構變得更難以把控，所以有人開玩笑像亞馬遜的數據中心需要8000多名博士后才能成功運營，這個也不算過分。

那么我今天要介紹的融合基礎架構，實際上就是說把整個基礎架構層面就是說應用邏輯除外，你的基礎支撐系統包括數據庫包括操作系統等等，這些基礎架構層面的東西盡可能做縱向壓縮，同時做橫向拓展，達到一個效果把下邊復雜部分壓縮下去，給上邊業務邏輯騰出更多空間。事實上在我們這種一體機上面它所有硬件都是通用的硬件，同時它又運作預先整合預先優化，使得整個性能可以充分發揮，匹配度能夠發揮更多，我舉一個例子，我們像雙層架構有計算節點，存儲節點的融合系統。但是這里邊有些小細節東西當存儲節點多了，計算節點通道數量會相應增加。

我們知道一些個友商也提供預整合系統，但是它不去提供太多的靈活性只提供固定幾個規格，2+3的規格，4+7的規格等等，這樣規格背后的原因其實不光是它一個廠商比較靈活的調配，我們通過自己技術的積累，我們提供足夠靈活性同時能夠做到部件級整合和全系統的資源匹配，我們具體這種產品基本分成三種系列，我們對基礎架構的理解就是說從用戶應有來講，它有三個基本應用場景，這是我們一些應用案例，大家可以看到左邊這塊是我們跟惠普(英文)加上XP24000，灰色是時間，紅色是我們數據庫一體機最小規格在同樣節點上面，惠普(英文)和我們跑的都是(英文)數據庫，下邊一個右邊這個是IBM的一個，大家會看到整個性能的差別還是非常非常明顯的，幾乎在每一個業務領域所有場景都有加速。

今天的內容我的硬件部分就是我的一體機，作為一個融合系統，我們今天也有幸請到非常深入的合作伙伴南大通用(音譯)下面部分請黃東旭黃總給大家繼續介紹。下面是黃總演講內容：

黃總抽取幸運兒

非常感謝董總，我是來自于南大通用的，今天非常榮幸有這樣機會談一下我們對融合架構的看法，我們南大通用主要從事數據庫產品研發和銷售。我們一款主打產品就是GBASE8A列寸MPP數據庫，首先來調整一下我們的產品，我們產品叫做GBASE8A MPP Cluster，為超大規模數據提供高性價比通用平臺，下面是幾個特點和特性，集群的扁平架構沒有主節點，基于列存儲面向分析場景，高動態的擴展能力可以橫向擴展到幾百個節點，管理的數據量達到TB到PB級。高可靠性我們有自己的高可用機制，采用安全組機制來保證系統的高可用。并且面向文本數據我們推出自己檢索的功能。

接下來給大家看一下GBASE8A的應用場景，這是我們GBASE8A面向不同行業目標的一些典型的場景我基本上給它歸為四大類，第一個是海量數據查詢分析，面向互聯網金融電信等等作為分析庫PB級數據支撐能力，一般來講實現這種數據的經營分析類的應用或者報表的應用。第二類是對數據倉庫的支撐，這種百PB級的支撐能力，我對于數據按層級進行匯總，所以說我們可以很好支撐這種百億或者達到萬億級多表操作。

第三個場景是查詢對寬表分析的場景，對上千列寬表進行任意查詢，由用戶指定查詢條件。最后一個是基于心型和雪花模型多維分析，這是我們GBASE8A幾大應用場景。典型案例，像電信、金融等我們有一些合作伙伴。目標客戶除了我們四大行業，除了電信、安全、政企、金融，我們把它總結為經營類、管理類、監督類、專業類。這就是我們四大行業以及四類應用。在我前面提到那幾大應用場景中我在做過的項目中，經常遇到IO性能的瓶頸，我們有自己性能分析的工具，我們可以準確定位到性能瓶頸具體在哪里。

我們發現基本上在四大場景中，絕大多數面臨的性能瓶頸主要是IO的瓶頸，包括網絡與磁盤的IO，比如說最典型數據倉庫的場景，心型的數據模型對于多表關聯操作，分組操作都面向不同程度磁盤IO的瓶頸，比如說面向多表關聯的時候我需要對大表或者小表做全表的掃描，如果是數據庫集群涉及到數據在集群的流動，比如說匯總的時候做這種分組的時候我們需要將臨時數據不斷的寫入磁盤，匯總需要從磁盤當中讀取臨時文件。這種硬件IO瓶頸作為軟件是無法去跨越的，但是幸運的是現在已經有一些新的硬件技術來極大的拓寬IO的吞吐，現在有業界最快的互聯網絡，極大拓寬在集群節點間的IO通道，分布式存儲的技術，去除傳統固有IO瓶頸。并且SSD作為主存的使用也提高了數據吞吐一個效率。我們如果做一體化存儲的話，可以實現IO在不同盤自動的附載，我們軟件不需要考慮這方面內容，避免過熱的磁盤，并且同時可以完成在平臺層面磁盤間故障的切換。

新的這種硬件技術當然也促發架構演進，傳統數據庫加小型機加磁盤陣列在架構上很難去延續，并且基于SMP架構它的擴展能力已經接近上線無法滿足大環境下一些應用特點的需求的，因此這種數據庫一體機融合架構它的優勢就顯示出來了，包括這種MPP硬性數據庫，這些新的硬件技術都非常有利于我們在應用當中對于數據庫優化的時候來消除性能的一個瓶頸。從市場角度傳統的這種軟件和硬件分離的方式參與市場競爭，它有一些弊端，比如說我們面對不同產品廠家是非常多的，面向市場競爭的時候缺乏這種競爭力，并且最重要是軟件和硬件它的兼容性這是很大一個問題，并且對于資源的優化利用程度是非常低的。因此作為我們數據庫廠商非常愿意去推出數據庫一體機的這種概念，這種概念它相對于細分市場我們會專門做軟硬件專門的優化，應對一些細分的是藏，這種差異化的戰略提高整個市場的競爭水平，并且對于系統級整體調優，對于系統資源優化利用率提高系統優化也是有幫助的。我們GBASE8A希望提出的這種數據庫一體機是一體服務器加上MPP(英文)數據庫這種融合的架構，當然整個架構當中預集成預安裝GBASE8A數據庫提供統一的管理，并且進行這種軟件和硬件深度優化一個基礎，這樣的話就可以使我們的客戶在繁重的IT維護當中解脫出來，把精力集中在核心業務，他們自己的核心業務上?，F在我們已經跟董總天璣數據這邊正在進行一體機的一個探討，我們希望使用一體機軟硬結合的一種方式最大性能發揮我們數據庫本身一個作用，我們的目標是推出簡單靈活高性能，并且高性價比軟硬整體的解決方案。以上就是我今天匯報的內容，如果大家對我們產品感興趣可以會后找我一起交流，謝謝大家。