1、用户行为数据采集平台搭建7 j" J6 u! k9 r6 f5 w# [0 k
2、业务数据采集平台搭建% g! N8 g% W, {
3、数据仓库维度建模3 G! w2 k% S; s8 N
4、分析,设备、会员、商品、地区、活动等电商核心主题; G% L; [) B. r2 x4 p7 M
5、采用即席查询工具,随时进行指标分析: f, Y9 u K) Z0 D
6、对集群性能进行监控,发生异常需要报警1 o7 V+ h# c9 A( Q# A
7、元数据管理6 B9 F% [$ _. D- h' Y
8、质量监控- Q3 B0 H7 ~* Y4 X& x# a7 X5 r! m
5 w! d# o. M& J* _7 n0 a5 k Y
数据采集传输: Flume,Kafka,Sqoop ,Logstash,DataX,
4 ?' j. u1 t9 }! Q% B6 ^数据存储: MySql,HDFS,HBase,Redis,MongoDB
0 m, }6 ^/ O% S( s: d4 X9 W& |( [, R. j数据计算: Hive,Tez,Spark,Flink,Storm& Z: u, v. C2 u1 l8 p1 h
数据查询: Presto,Kylin ,Impala,Druid! D+ x& j; A; E% r
数据可视化: Echarts、Superset、QuickBI、DataV* H0 Q. q9 S* g& \1 ^
任务调度: Azkaban、Oozie
1 n- o' b" ?! o集群监控: Zabbix. x4 c' U8 b3 Z7 k* S
元数据管理: Atlas1 s$ D0 `2 v2 z
+ q: w% d3 z: _9 J8 H2 |7 X
本论坛所有资源由10年架构精挑细选,告诉你该学什么,什么值得学,/ n4 Q4 B' l8 [4 j( s4 z. ~! K# @% Q
跟着程序源码论坛的课程学就对了,不再迷茫,技能get999+
- |3 c0 _! m, I8 ~6 d+ T
( e: ], ?1 ^9 S" X/ @3 L" }% h
( c9 ^' l) G1 _' i# h' q. b$ L
6 S; [4 y0 q( C w: y! g$ r
5 `, _3 A0 a" A/ j+ a2 i
! B! c! E( X" v2 f" C
: g5 A5 a% p2 c0 X |