湖倉實時化決策更精準

從數據倉庫到數據湖再到湖倉一體,數據架構伴隨業務需求持續演進,實時的商業洞察、服務和分析成為下一代大數據系統面臨的重要挑戰。綠洲平臺3.0實時集成引擎和湖倉一體引擎全面進化,以全鏈路實時化能力,帶來更快的處理速度和更鮮活的數據,讓企業在實時混合場景下的商業決策更精準。

●實時感知進化,數據鮮活流動:實時集成引擎搭載自研微批聚合算法,相比開源性能提升100倍,實時吞吐量達150MB/s,智能切片實現億級數據秒級切片、分鐘級入湖;新一代湖倉一體化引擎,通過Hadoop+MPP的多模態數據湖,輕松構建離線數倉和實時數倉,業務開發效率提升3倍以上,計算性能提升10倍以上;高性能實時數倉實現萬億級數據查詢秒級響應,相比同類型數據庫CPU和I/O消耗降低50%以上。

●實時集成調優,極致性能體驗:綠洲平臺3.0實時集成引擎提供從源端抽取、中間計算到目標端加載的全鏈條的極致性能優化與數據處理能力支持。源端通過對源表的智能秒級切片,保證抽取性能的同時降低資源占用;中間計算每一條數據都可以進行實時的精確到字段的毫秒級運算加工,輔助智能化、自動化的衍生應用;加載端設計實現了獨有的微批聚合機制,極大地提高了數據入庫性能。

數治智能化操作更省心

大數據工程包括數據采集、存儲、處理、分析和可視化等各個環節,每個環節都需要精細的設置和優化,高度復雜的配置提高了數據工程的實施門檻,阻礙了數據要素價值的釋放。綠洲平臺3.0將AI算法模型應用到數據集成、數據開發、產品維護等業務全生命周期,大大降低數據治理成本和使用門檻,全面提升治理效率。

●數據集成基于NLP模型+相似度匹配算法實現字段智能映射,提升數據集成效率;

●數據安全基于行業數據語義,實現敏感數據自動分級和智能識別,敏感數據零泄漏;

●數據開發治理基于數據特征挖掘和行業經驗,實現數據質量智能檢核和知識生成;

●運維管理:基于語言模型協助故障定位,運維效率提升30%以上。

此外,綠洲平臺3.0借助AI算法提取非結構化數據中<實體-關系-實體>三元組知識,通過結構化和非結構化數據的融合形成行業知識圖譜,幫助萃取行業知識,提升企業決策水平。

數據工程化 協同更易用

傳統的數據開發治理工作需要大量的人工投入,如何讓工具更簡單易用,是綠洲平臺一直在探索的方向。綠洲平臺3.0創造性地提出數據工程化理念,打造標準化的流水線作業,實現數據開發治理的高效協同,保證高效高質量的輸出數據資產。

●可遵循的標準:內置行業統一標準,支持依標建模,支持依標分級分類;

●可持續的管理:治理不止針對已入庫數據,在數據集成和開發的同時進行數據治理,隨時監測新數據的質量和安全性,保證長治久安;

●可量化的效果:通過事前評估、事中檢查和事后對賬等方式,對數據質量進行量化評估和監控,實現全鏈路血緣可視化,結構化非結構化數據統一管理和結果量化;

●可復制的經驗:通過開發環境與生產環境協同、部署開發成果的復制和推廣、經驗積累等方式,降低部署開發成本,改善數據標準和質量規則,持續提升平臺能力。

數據資產化 共享更便捷

沉淀的數據只是資源,只有動起來、用起來,數據的價值才能釋放。綠洲平臺3.0為加工后的數據資產,打造四中心一門戶的優質資產體系,讓數據的共享和流通更加便捷,充分發揮數據要素價值。

●資產中心:匯聚融合數據、AI、應用系統等多維資產,通過資產門戶統一對外展示,實現全景輕松一覽,資產一觸即達;

●運營中心:提供多樣化資產運營指標分析,直觀評估資產價值,通過高效資產協同機制,實現資產互聯互通;

管理中心:全能流程審批引擎規范資產管理,充分發揮數據新型生產要素作用,實現內增值外增效,持續釋放數據價值;

●安全中心:基于區塊鏈和隱私計算,打造完善的數據存證及監管機制,實現智能合約監管,讓數據可用不可見。

場景套件化交付更敏捷

隨著數據市場需求的日益增長,單一產品已無法滿足不同行業和企業的需求,為了幫助企業快速響應市場的變化,高效搭建高質量業務平臺,綠洲平臺3.0依托在各行各業數字化實踐中的積累和沉淀,與超過200家ISV(獨立軟件供應商)深度聯合創新開發,融合6000余計算指標,覆蓋100余細分場景,實現產品交付的提速增效,助力方案敏捷落地。

目前,綠洲平臺3.0已形成數字政府、教育、水利、醫療、企業、交通等多個行業套件。未來,綠洲平臺將繼續與ISV緊密合作,不斷豐富行業套件的深度和廣度,持續推進協同開發,促進行業解決方案不斷完善。

湖倉實時化、數治智能化、數據工程化數據資產化、場景套件化,綠洲平臺3.0五大內核全面進階,將為數字化創新提供核心動力,釋放數據要素更大價值。面向未來,新華三集團將秉持“云智原生”戰略,持續推動綠洲平臺迭代升級,構筑起領先的用數底座,助力百行百業數字化躍遷。

未經允許不得轉載:存儲在線-存儲專業媒體 » 綠洲平臺3.0:五維能力進化 輕松步入數字化變革新時代
分享到

謝世誠

相關推薦

精品国产午夜肉伦伦影院,双性老师灌满浓jing上课h,天天做天天爱夜夜爽,攵女乱h边做边走