1、用户行为数据采集平台搭建
, U6 P: f+ R7 r2、业务数据采集平台搭建2 X) S& ^5 g$ \
3、数据仓库维度建模' x( a2 c& S4 A t: l5 `) g1 V
4、分析，设备、会员、商品、地区、活动等电商核心主题' n" X2 o# |+ g7 L1 e# a
5、采用即席查询工具，随时进行指标分析. B2 R G3 P! K
6、对集群性能进行监控，发生异常需要报警
# d! p! O6 Z. c. o5 ], y1 m# ~7、元数据管理
; s. J( ]6 A$ D: ?0 G& n8、质量监控1 c! Y5 x6 @3 w; ^: Z
7 b2 Y- ?, R/ T: V6 t数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,5 C. e* d0 u4 X3 q/ ~. W/ K
数据存储: MySql，HDFS，HBase，Redis，MongoDB
_5 B2 T. R5 E) j# d& B0 E数据计算: Hive，Tez，Spark，Flink，Storm4 s" [* Y- y1 h" N+ M4 a
数据查询: Presto，Kylin ,Impala，Druid
+ @/ u' w( a4 @数据可视化: Echarts、Superset、QuickBI、DataV7 }8 u$ M, L. A- L6 M2 R, C6 L$ Y$ C
任务调度: Azkaban、Oozie. t" G9 v( q, W+ q! Z8 k
集群监控: Zabbix
! h! H- g# x$ ]2 B% v: O, z元数据管理: Atlas
( e. _3 G3 y( z$ A/ p6 s: P, h2 \' Y: X2 r
本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，
/ ~$ r* M" o% {5 i3 R! p- k! t跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
" b6 M- k1 L% f$ s6 N \
# W! ]. d5 B# b0 x( q3 a
6 |) G7 _- V2 O4 N
% D1 v6 E- O) P! }1 m. {" X
0 I+ W: w% V8 l& @; W, R/ l
$ [8 [1 _& w7 _* R$ ^3 P6 i
0 [- b2 W& f j) C) i. x |
/1 
