1、用户行为数据采集平台搭建
( L2 d% g' s4 m2、业务数据采集平台搭建
. O6 t! T& T) ~, e7 J3、数据仓库维度建模' S/ Z/ Q8 v" B v: X
4、分析，设备、会员、商品、地区、活动等电商核心主题$ J0 @$ w+ L4 k/ L& I
5、采用即席查询工具，随时进行指标分析
/ T7 A3 y& b; j! }) t" G* Y! z3 _% j6、对集群性能进行监控，发生异常需要报警$ Q- Y9 B" [$ O
7、元数据管理
, r; H' f ]7 L, i8、质量监控
( [1 x6 e3 y( z' o o
4 T9 y5 R- Y8 o) e6 g; ?1 y数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,
3 y- |( ^4 O2 o1 i- O. P8 N8 C数据存储: MySql，HDFS，HBase，Redis，MongoDB
2 V- B& A: ] n1 p# \- k数据计算: Hive，Tez，Spark，Flink，Storm
1 K7 N `) g- g) z' W数据查询: Presto，Kylin ,Impala，Druid
) y2 y- l* }5 _3 l0 Y1 Q( N( Z数据可视化: Echarts、Superset、QuickBI、DataV
( m( o0 b7 L$ ?1 P+ n" E3 Z任务调度: Azkaban、Oozie
1 u+ M- u" a: d0 q2 Y7 F) G集群监控: Zabbix
. k% ?" H# T. P9 Q k6 Y元数据管理: Atlas* `* I" W' l' s7 j$ X/ {* J
' k& Z( J A5 m1 h5 B% x3 O& S
本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，
# ~/ m0 E$ W, B6 M" u, c, |跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
7 D) |" p9 Z' Q& y$ q. V2 f, b1 c, i; K9 c7 M
. W* I' o F! n6 I( }3 @7 C9 {
6 |2 _1 L: ]/ D3 m# j) X1 V0 b( \1 L5 C% S6 w% x" N) u
' N2 m1 [; B8 L7 J( P
9 @* |# ?) y. \8 R2 X8 i" i7 ?) J, x
|
/1 
