企業級大數據平臺 Big data Enterprise Platform(D+)

D+ 是基于開源Apache Hadoop,綜合大數據市場需求,十年磨一劍,打造的企業級大數據平臺產品。

D+ 集成生態圈中多種優秀組件,實現了采集、處理、分析、存儲、搜索、算法、服務、安全等全域一體化的數據加工能力,通過實時動態分析、離線數據模型分析、挖掘、預測等手段,為企業級用戶提供強大的分析、決策、創新等支撐能力。

D+ 同步最新的Apache Hadoop 穩定發行版,集成了最新穩定的Pig、Hive、Ooize、Tez、Storm、Spark、HBase、Solr、Kafka、Flume、Sqoop、Knox、Ranger、Hue、Zookeeper等組件,極大增強其兼容性、安全性、穩定性, 解決了版本、組件等相互依賴問題,使用戶能夠專注于數據存儲、處理等業務應用,而不用關心底層平臺問題。


特點與優勢

D+ 平臺從用戶角度出發,對Apache Hadoop進行了系列技術開發和增強,解決了開源的Hadoop面臨的性能和穩定性問題,形成了企業級大數據平臺完整解決方案,從而將用戶從底層平臺中解放出來,使其能更好地專注企業業務,實現企業數據的新價值。

一體化打包:平臺集成了Hadoop、Pig、Hive、Tez、Storm、Spark、HBase、Flume、Ranger、Zookeeper等組件,完成了大數據一體化打包,解決了開源組件復雜的版本管理、兼容性、組件沖突、編譯失敗等問題,降低了邁入大數據的技術門檻。

高可靠的企業級運維管理:平臺通過提供數據存儲、分布式計算、數據分析挖掘以及數據可視化的整套支持,解決了企業在GB到PB級數據分析領域碰到的各種問題。作為企業級大數據平臺,提供了友好的可視化界面,支持集群的安裝、配置、監控、預警等全方位、一站式服務。

數據全生命周期管理:平臺支持數據移動、管道協調、發現和生命周期管理,使用戶可以快速地將數據及相關處理和管理任務上傳到Hadoop集群。全過程具有完善的路線圖,極大地減少了開發和管理人員處理復雜數據的痛苦。

核心功能

集中監管:D+ 平臺具備集中監管能力,不僅支持群集運行狀況可視化管理,還提供相應工具來管理配置、優化性能。其中D+ Manger具有集群自動化安裝、中心化管理、集群監控、報警等功能,將安裝時間從幾天縮短到幾小時,運維人員從數十人降低至幾人,極大地提高了集群管理的效率,降低企業運維成本。

數據存儲:平臺的核心組件由 YARN(Yet Another Resource Negotiator)和HDFS(Hadoop Distributed File System)構成。 YARN是 Hadoop 的架構中心,支持同時以多種方式處理數據。YARN 提供資源管理和可插拔架構,以支持廣泛的數據訪問方法;HDFS 為大數據提供可擴展、容錯、低成本的存儲,具有多副本、負載均衡、機架感知、多租戶訪問、文件誤刪除恢復、分布式緩存等特性。

數據訪問:平臺為各種處理引擎提供標準服務,支持同時以多種方式與相同數據進行交互,涵蓋批處理、交互式 SQL、NoSQL 的實時(低延時)訪問。
針對目前在Hadoop 環境上運行交互式SQL查詢大規模數據集的需求的不斷高漲,平臺優化了Hive的后端引擎處理模式,集成了Impala 、HAWQ等多種方式來為結構化數據提供高效的、可擴展的引擎。

數據監管整合:平臺具有數據監管的強大能力,提供可靠、可復用以及簡單的方式來管理數據流在 Hadoop 中的輸入輸出。此控制結構擁有一套簡單易用、自動化的工具,能快速地將Hadoop 中的數據、元數據、應用集成到企業已有的數據架構中。

數據安全:平臺按照金融和運營商等數據密集型行業對產品高可靠性、高穩定性和高安全性的要求進行設計與開發,能夠有效支撐企業級核心業務數據的處理與分析。
平臺提供了身份驗證、授權、日志審計以及數據保護等關鍵功能,能夠滿足企業安全要求,確保 D+ 集群安全。

真钱棋牌