您好,請登錄或注冊會員中心

數據挖掘


聯成大數據平臺采用如下技術搭建:


數據采集

采用flume+kafka為核心技術支撐,提供文件、表、消息等適配接口,擴展了kettle、sqoop等ETL工具,確保各類數據的完美接入。


數據存儲

采用基于Hadoop分布式文件系統HDFS、Hive和Hbase,支持文件,表、行和列級存儲。

數據計算采用多計算框架并行,提供MR、Impala、spark、storm等主流計算框架,讓開發者可以輕松選擇適宜,熟悉的計算框架使用。


數據訪問

采用了企業數據總線理念,屏蔽了復雜的數據分析和數據封裝過程,提供了豐富的接口服務,使用者可以輕易的獲取,直接使用的想要的數據。

大數據平臺基于多租戶技術,對外提供獨立、安全的存儲、計算能力,讓前期沒有建設數據中心的企業用戶可以安全、方便的使用大數據平臺提供的能力。



1471569115114283.png








> 广东11选5开奖走势图表