1、用户行为数据采集平台搭建' H2 Q4 u# c( o" y, v
2、业务数据采集平台搭建 n& E3 y% s9 O8 ~! ~
3、数据仓库维度建模
" O+ C- [" J* V% u4、分析，设备、会员、商品、地区、活动等电商核心主题
8 V! ?+ P4 @( w( P' l5、采用即席查询工具，随时进行指标分析
9 Y- l: o+ F% g! K. f6、对集群性能进行监控，发生异常需要报警
( }' f% K7 I* `7、元数据管理
& e- V( |$ s0 P% T4 C/ R: H( n6 L8、质量监控
9 @3 B) E7 ^: |! S/ m2 O# R' W5 v7 y' A1 H! I8 {- k- R" S1 u) `
数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,
# a/ G8 l" m! k2 ^2 S数据存储: MySql，HDFS，HBase，Redis，MongoDB
& d1 B/ S2 W2 U4 V O# F# R数据计算: Hive，Tez，Spark，Flink，Storm, o: K& D+ B7 y( q' H& d8 {, b; h
数据查询: Presto，Kylin ,Impala，Druid
: Q U, L2 O% j- A$ t数据可视化: Echarts、Superset、QuickBI、DataV9 B; L* a3 ^! I
任务调度: Azkaban、Oozie
6 M- o6 ?. B2 `6 ~, \% F集群监控: Zabbix. K. ]$ N% B2 W: F! |" B/ p2 Y
元数据管理: Atlas
2 h$ Z* f" m, O. D% \' B
+ |3 N6 t: U# w4 ?9 @9 t9 F本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，
) a$ B, a* u1 u: u; ]$ S+ `跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
! I0 O$ b1 d) m' x' C
/ |- c6 f* n/ J
' c% s0 h9 P5 x T
% H9 i4 E; g" {, I
- G0 Q5 l* `+ Q% ?2 [6 y
, Z6 ]) l- e: \1 `
1 _. Q7 |/ Z: u) Q6 z+ D; p7 w. I% ~
|
/1 
