1、用户行为数据采集平台搭建
. e) R( b! ?- K% u+ W2、业务数据采集平台搭建. s( h8 Y+ A2 R* i% U- \. B
3、数据仓库维度建模
- L9 S& `, Y3 z9 c& @; `* V0 f4、分析，设备、会员、商品、地区、活动等电商核心主题
9 u8 N" H4 b" U1 n& z# Q4 L5、采用即席查询工具，随时进行指标分析
! ? |- q: {6 { @. g9 L# I6、对集群性能进行监控，发生异常需要报警" w5 w$ B' @) K2 V
7、元数据管理
0 `5 @" S# @" ^% j8、质量监控' `+ E( ^! E# _4 z. ~; S1 ]
! b8 |7 Y4 y# V3 @& l3 y数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,
0 f) }7 S0 `7 i* w$ E2 k4 V0 G( c数据存储: MySql，HDFS，HBase，Redis，MongoDB
) r; W+ Y, t( ]数据计算: Hive，Tez，Spark，Flink，Storm2 \" f1 q8 C: k1 K. I7 z: b
数据查询: Presto，Kylin ,Impala，Druid9 \: k/ M6 S! U" B! E x
数据可视化: Echarts、Superset、QuickBI、DataV
; s4 N/ r- O1 k! T+ U, C F任务调度: Azkaban、Oozie
0 X( o1 _$ K8 C6 ?* b集群监控: Zabbix( Q+ G% W0 K' C4 o: @' E
元数据管理: Atlas
% u/ X. ]5 D5 n
3 U; X* }8 x% B2 Y7 ]' t+ ~本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，6 l- g, ~. R( n" `( w
跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
8 G0 H: s9 U3 y/ q. e# a
. h; h' Q. `) Y/ D# A+ B& w2 ^6 a8 N, P' p4 G2 x, C8 n% V' ^4 Y
$ N% l# _; f: ~: o. g) h. T; _$ B0 Q. o: t8 t/ F
: X8 `) g; g4 ^7 {) k* L
p; k. b: {1 G5 [$ E4 f% x- {7 b |
/1 
