1、用户行为数据采集平台搭建
, k9 A' x: j* }/ _, `2、业务数据采集平台搭建- u8 t; J. ^. d2 r4 ?
3、数据仓库维度建模
. V$ y: \, [ k4、分析，设备、会员、商品、地区、活动等电商核心主题" Q, d' [5 a# o8 l% {1 |: O
5、采用即席查询工具，随时进行指标分析- W. C7 |7 V$ u* k1 S9 c
6、对集群性能进行监控，发生异常需要报警
3 J* c6 s9 Q8 J' ~8 T/ P9 v& ?7、元数据管理
: i$ t L" Z+ G, R/ N! P8、质量监控+ \& I2 Z7 |! v( Y' i( r* E5 B
* ~" A, I5 @+ L5 {9 R% g3 D, ^数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,6 X) L8 [: J8 U3 \3 t" Q/ b
数据存储: MySql，HDFS，HBase，Redis，MongoDB x$ `5 R; ?$ _0 E8 D9 U/ x0 l
数据计算: Hive，Tez，Spark，Flink，Storm8 g8 c, I; t8 m U$ x% `
数据查询: Presto，Kylin ,Impala，Druid
3 c! y# Q# J: j! V5 i. n数据可视化: Echarts、Superset、QuickBI、DataV$ b C& p: _; {5 i' z( h
任务调度: Azkaban、Oozie I( o6 l; D& N1 C+ f. k
集群监控: Zabbix' b# M$ r1 J; t6 a3 @ _1 C9 K, T
元数据管理: Atlas! z6 B, n. W3 ?9 L
# a$ d& {: ]! H/ j4 q( R本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，: H' k. L+ j0 C1 `4 y z
跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+& K+ w' l( T$ u
4 a2 m8 Y$ `; {% c: h) t
& A7 o2 Q% e2 y, X" n: o
( s' F% ?6 B9 E, t) J% l
1 a9 J% |+ F4 w) ?% p* t4 U
2 N( K5 t2 L( k' k
( a) m! Q7 ^. }& x, ^
|
/1 
