UCloud大數(shù)據(jù)生態(tài)全面支持集數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)分析和數(shù)據(jù)應用為一體的大數(shù)據(jù)應用場景,助力企業(yè)快速構建大數(shù)據(jù)處理體系,實現(xiàn)商業(yè)目標。
1
用戶通過Flume/DataX/Logstash等工具把日志數(shù)據(jù)、業(yè)務數(shù)據(jù)收集到UKafka中,UKafka中的數(shù)據(jù)可以給實時計算使用,或轉存到HDFS、UES、HBase、UDW等存儲系統(tǒng)中做離線分析和數(shù)據(jù)挖掘使用;
2
實時計算可以通過UFlink、UHadoop中的Spark Streaming在UKafka實時讀取數(shù)據(jù),進行實時ETL、實時分析、實時訓練;
3
離線計算可以通過Hive、Spark 、MapReduce進行數(shù)據(jù)清洗分析;
4
計算結果數(shù)據(jù)可以存儲在UDW、HBase、UES、MySQL等存儲系統(tǒng)中,以支撐個性化推薦、報表、風控、監(jiān)控等業(yè)務使用。