1、用户行为数据采集平台搭建. q; ?9 A% J' g
2、业务数据采集平台搭建. J# }) v O* G. R I! \) j2 F5 a
3、数据仓库维度建模+ I( \3 p+ r6 p! l' [4 j
4、分析,设备、会员、商品、地区、活动等电商核心主题
) e9 S+ D0 l+ Q3 U5、采用即席查询工具,随时进行指标分析5 I" w" D7 R, D5 s$ T9 d
6、对集群性能进行监控,发生异常需要报警2 b5 r+ k: y1 `) l9 k) F% g% v
7、元数据管理) @: l, e" Z. W4 P8 m' R3 N
8、质量监控/ d9 _+ \. N+ A
- {; c: u/ a, h& _; O% u
数据采集传输: Flume,Kafka,Sqoop ,Logstash,DataX,
5 U( a3 u$ t. S1 Q8 q Y+ P" q. d数据存储: MySql,HDFS,HBase,Redis,MongoDB
; P8 \) c" r7 s6 e8 j& l$ h数据计算: Hive,Tez,Spark,Flink,Storm( H; G2 w+ b! ~: _4 ]& h
数据查询: Presto,Kylin ,Impala,Druid
; t7 P4 z( Z3 `7 _数据可视化: Echarts、Superset、QuickBI、DataV
2 z. V7 z+ Y& @# Y! U5 ?1 |任务调度: Azkaban、Oozie' ]! J# }) v% Q9 e: J
集群监控: Zabbix5 Y% Y9 _7 |. k: r6 d" x
元数据管理: Atlas; a2 y2 d# ~( @- a$ `- i4 \
# e( Q" k: V0 f* H0 L! [$ s本论坛所有资源由10年架构精挑细选,告诉你该学什么,什么值得学,9 r5 _3 K) l" Q8 g
跟着程序源码论坛的课程学就对了,不再迷茫,技能get999+
) V2 g: R, g! P: L _, }
* P; W2 K/ V2 U
# \3 h8 T1 Z2 U; u; G
* u; ^$ j: F. |3 B$ i
7 [, k) U4 ?: g4 p# n: j5 {
: A& u |, c% N0 ?
. d) y" s: ]% e5 P( l/ _$ j3 W6 E |