1、用户行为数据采集平台搭建 B7 x% \; Q9 _# x0 \
2、业务数据采集平台搭建$ b ~/ G. G& ~% H( n# e
3、数据仓库维度建模. u( N% l- P# E* g' X9 K5 o
4、分析,设备、会员、商品、地区、活动等电商核心主题
# z5 t4 p: q& {+ U6 Y* P5、采用即席查询工具,随时进行指标分析
/ d2 G( h$ i: l0 k/ c: n6、对集群性能进行监控,发生异常需要报警
5 L$ U3 h l$ J* u- Q, F% U7、元数据管理# u3 J+ k7 i E. ^
8、质量监控
p; h4 f1 c3 o( h i9 x/ L" f+ t
X6 X# Y, ?! c+ A3 A+ ?4 H) d) W- p数据采集传输: Flume,Kafka,Sqoop ,Logstash,DataX,
1 B) u) M7 _% H0 O% k5 ^9 J/ T数据存储: MySql,HDFS,HBase,Redis,MongoDB
& [6 X; O6 t% N3 ]0 W% h+ M- N2 [数据计算: Hive,Tez,Spark,Flink,Storm
; l) j& y, S% B0 G# n+ w( Z u9 w数据查询: Presto,Kylin ,Impala,Druid
! ]3 m! A U! H* W' d数据可视化: Echarts、Superset、QuickBI、DataV
+ e3 _' t2 a; o7 G6 _" U& F! k1 l任务调度: Azkaban、Oozie
0 a* o; `1 Y1 H0 C" M集群监控: Zabbix
8 x- o* z: y% m元数据管理: Atlas
# J2 l8 l& ^/ `3 r1 r
+ V f3 b# y1 ^2 t0 a( S7 j本论坛所有资源由10年架构精挑细选,告诉你该学什么,什么值得学,$ ]) o3 d2 x7 S, F" o
跟着程序源码论坛的课程学就对了,不再迷茫,技能get999+
$ U/ x; w0 b3 Q3 W
- C* a( D! D- a8 Q Y1 i1 L. P H9 ?6 ]) t( _# k [+ k
. ?, D( \6 ~5 A* E }- l. H8 b1 G% U1 Q# P4 X4 R6 k) {% Z
! j4 H' D- R0 [7 \. W
M3 Y" V0 ^6 ~1 J! ~3 j% e
|