1、用户行为数据采集平台搭建/ P1 B9 R( E5 c, x* i2 _. X6 x6 u
2、业务数据采集平台搭建* T) k7 }' _5 c0 U3 r
3、数据仓库维度建模. I4 l/ }/ e8 _' r7 }
4、分析,设备、会员、商品、地区、活动等电商核心主题
4 Z5 e- V# H! Y& ?2 q! p* [5、采用即席查询工具,随时进行指标分析9 @4 w5 k7 u) o3 B. g
6、对集群性能进行监控,发生异常需要报警
! n5 n$ u6 V( u3 l) V$ ]7、元数据管理
# [! ~% i( \ ^" w4 ]8、质量监控7 y7 c3 T v k4 m% o2 i# I2 z! a4 S" H
, A u0 _% z$ i% ]: [( g6 s' f1 U8 G数据采集传输: Flume,Kafka,Sqoop ,Logstash,DataX,
* |$ S2 c4 i r数据存储: MySql,HDFS,HBase,Redis,MongoDB& O) _6 e% x2 e8 e
数据计算: Hive,Tez,Spark,Flink,Storm" Q9 P) s/ d- F8 J) `( ]# f% H
数据查询: Presto,Kylin ,Impala,Druid2 T. T5 b t" [- X6 P8 c
数据可视化: Echarts、Superset、QuickBI、DataV
3 t7 m. r! d4 B+ A9 T1 \任务调度: Azkaban、Oozie( s8 q5 Q7 r: m" V
集群监控: Zabbix
: x: \: C n+ l1 P' R5 r, G元数据管理: Atlas# z- x/ ]2 U2 F M
- v- f) _, ]' F' U) k9 J本论坛所有资源由10年架构精挑细选,告诉你该学什么,什么值得学,
4 G& T" Z8 w6 T跟着程序源码论坛的课程学就对了,不再迷茫,技能get999+2 |8 Q7 m! t9 K9 ]
" R6 t) f2 E, o
% o: t- F6 q: t3 S) L, J
+ J+ |2 d3 q0 t9 }3 d3 o3 c
. R2 D% P* `5 m
/ B) T* S: H4 v D, q6 O2 v& G
$ h" T3 m7 h3 Y
|