1、用户行为数据采集平台搭建$ L- ]% k8 {) f/ n1 E
2、业务数据采集平台搭建+ i+ E, _5 K* _- I2 b
3、数据仓库维度建模
3 z) s( m5 Q/ \9 d; H& G4、分析,设备、会员、商品、地区、活动等电商核心主题! \, B E1 G; T+ S' m
5、采用即席查询工具,随时进行指标分析
' K& k9 }" P* v, B! x0 m$ ]6、对集群性能进行监控,发生异常需要报警
. X' [6 \5 [7 P% c4 ]/ Q. `7、元数据管理
9 W7 v* D8 h# b: d& d$ _" O8、质量监控: P1 ]5 W$ }( r1 T4 N2 P- J. G
4 T4 v! k, d- z# M1 }
数据采集传输: Flume,Kafka,Sqoop ,Logstash,DataX,0 h# ^' |" [4 }8 c, P, C- I, d; @
数据存储: MySql,HDFS,HBase,Redis,MongoDB
& ?: C! S& K- ?' k* g数据计算: Hive,Tez,Spark,Flink,Storm: W& o. q, |, v4 r
数据查询: Presto,Kylin ,Impala,Druid
( ^% E7 q9 ]7 r: ^: h数据可视化: Echarts、Superset、QuickBI、DataV& w# f* l: n& B7 o! z1 P
任务调度: Azkaban、Oozie
2 B2 \+ K! ? l& b0 a集群监控: Zabbix1 S+ [, }# ?! v/ ^" w
元数据管理: Atlas
/ Z ^. B3 w) i) B2 T$ M: P/ U
0 A$ M6 J7 p7 Q/ f6 p本论坛所有资源由10年架构精挑细选,告诉你该学什么,什么值得学,
) @& t; _$ z! y/ u跟着程序源码论坛的课程学就对了,不再迷茫,技能get999+& h( J0 W4 h( h; U6 D
: Q! ?3 T! ^+ W" Y1 R* `$ L
1 H: I) I8 F2 \4 o; F3 @. Z4 ~) L
- P8 |% s5 ?4 h0 Q; Y. E
6 n$ p n2 F. ?, l) O6 F O- \- H+ E$ J% g2 G# ]' u* S
2 U' a9 E5 w4 i5 r; Y$ h
|