因為此前采用的是磁盤陣列的方式,最終計算性能就受限在存儲讀取設備上。而此次我們做了分載,通過分布式系統進行存儲,采用了集云的一體化的系統,實現穩健的快速存儲、訪問及安全規范。

江蘇集云信息科技有限公司CEO陳寶輝對這個項目有清晰的認識:云存儲就是擺脫單存儲節點的瓶頸,往橫向擴展(scale-out),橫向擴展存儲是這個項目的關鍵,用低成本的存儲服務器能夠橫向擴展達到高性能的要求。這就是通常說的云分布存儲方案在贊奇實現的一個關鍵。

江蘇集云信息科技有限公司CEO陳寶輝總結道:其實云渲染主要用了兩個能力:計算能力、存儲的讀寫能力。因為是并行渲染的,500個節點接到渲染任務,500個節點同時渲染。同時渲染的時候,等最后一個節點完成才能并行往下處理第二步,所以某個單節點如果很慢就會產生一些問題。這些問題,大部分瓶頸不在計算上,而是在存儲上。普通存儲應對并發訪問的時候往往成為瓶頸,導致系統處理速度就變慢,這個挑戰就是我們和英特爾合作的契機。英特爾有一個橫向擴展存儲參考設計,我們參照它的參考設計,設計了一體化的存儲產品,包括服務器、網絡、存儲系統全部集成,然后跟客戶一起調優。贊奇項目是我們第一個在云渲染存儲的應用。在項目測試中,我們的存儲達到了設計峰值,它的能力都用上了。

整個系統真正做到了分布式的,核心就是橫向擴展(scale-out),如果將來它的存儲能力不夠,那么通過不斷增加存儲節點,系統存儲能力和I/O并行能力可以隨時無縫升級,這是傳統存儲做不到的。而且我們的產品不僅滿足性能的要求,同時為用戶實現了較低的成本。比如我們使用的硬盤,就不是價格昂貴的光纖盤,而用的是廉價的SATA盤。通過對每次讀寫速度的測量、調優,到達性能和成本兼顧。云渲染中對存儲有獨特的訪問模式,通過大量調優我們的橫向擴展的存儲技術來達到并發渲染高性能的要求。從效果來看,大概成本是原來存儲設備的三分之一到五分之一,但速度高幾倍。

同時橫向擴展存儲的管理性也很重要,比如有防硬件故障、防鎖,集云是英特爾的服務器方案合作伙伴,很多技術都通過與英特爾的合作實現。我們下面將和英特爾在另一個橫向擴展技術Luster存儲方案上合作,實現有更多商業支持的解決方案。

設備定制化讓性價比更好

除了整個系統架構的改變,出于性價比的考慮,各種設備也采用了定制化。剛剛大家已經看到了存儲采用的是SATA硬盤,其實服務器也是定制的。在這個項目中,我們開發了中國第一個托盤式的服務器產品。

托盤式服務器在Facebook是用到過的,它為Facebook三年節省了20億美金。而這個項目中,同樣采用了這種設計,從而讓用戶的成本也降低20%,性能則提高20%,所以整體就有40%的性價比的提升。談到整個項目Intel公司提供的幫助,江蘇集云信息科技有限公司CEO陳寶輝說,跟英特爾的合作在很多上面都是方案定制服務。,因為現在的市場競爭已經不是在某個局部技術上的競爭,而更多是一種方案的競爭。我們的方案是根據用戶的需求定制的,在服務器設計時把CPU設計在哪個位置更節能,機構如何設計更有利散熱并降低成本等,,這些都是根據特定的用戶需求定制的優化實現方案,這樣形成了集云獨特的競爭力。云存儲也是這樣,我們能用SATA盤達到光纖盤的速度,有巨大競爭優勢的創新,同時成本也降低了很多。

依托與Intel的合作,整個的架構其實我們沒有在基礎設計上投入太多,。我們的投入更多地是在Intel的基礎技術上為用戶進行量身定制方案設計和服務這是很好的一個合作共贏模式。

整體性能提高三倍

贊奇科技發展有限公司總經理楊昕吉作為用戶對這套系統還是非常滿意的,他說:“采用這套系統之后我們整個訪問效率大大提升。第一,存儲設備的網絡占用率明顯下降,比原有占用率下降三分之二。第二,整體系統存儲和訪問速率提升三倍多。使得整個系統規模目前已經可以突破到500臺。我們系統的負載有一個自動調配的過程。通過英特爾至強服務器,充分降低了我們TCO的指數。目前渲云數據中心已為上千家客戶提供服務,如蘇州米粒、常州的恐龍園動漫、卡龍、炮炮兵,蘇州天潤安鼎等。”

總體來說,這一套新的計算架構存儲效率確實比以前讀取穩定性更高。當然,新系統還有一些挑戰,楊總也希望和集云陳總和英特爾繼續探討超大規模的并發訪問。贊奇目前是500臺,但是遠期的目標是要做到2000甚至5000臺,因為只有這樣才可以面向好萊塢的影片提供高性能的渲染服務。

未經允許不得轉載:存儲在線-存儲專業媒體 » 分布式云存儲提升贊奇科技云渲染平臺三倍性能
分享到

shaohaihong

相關推薦

精品国产午夜肉伦伦影院,双性老师灌满浓jing上课h,天天做天天爱夜夜爽,攵女乱h边做边走