1、用户行为数据采集平台搭建) R* {4 C! H0 [0 d& m+ I
2、业务数据采集平台搭建
% [$ P% D0 r1 l8 |7 h/ j' F3、数据仓库维度建模
' V. t# O; e) H4 ~; S4、分析,设备、会员、商品、地区、活动等电商核心主题
, c% ^2 `) [8 D. D- A _5 J! P5、采用即席查询工具,随时进行指标分析8 h. ^- S0 C+ K3 T6 v
6、对集群性能进行监控,发生异常需要报警8 g# Z9 m: m% @2 E ~
7、元数据管理9 v8 u! F( @1 o2 u. A( F5 V$ z+ y% K: @5 k
8、质量监控9 Y* Z8 z& Q- [! o8 \- a
j/ V5 }0 V: k$ `4 g3 [数据采集传输: Flume,Kafka,Sqoop ,Logstash,DataX,
% C3 b9 k" y9 @% n; |1 e数据存储: MySql,HDFS,HBase,Redis,MongoDB
( N- V; V: ^) w数据计算: Hive,Tez,Spark,Flink,Storm
6 T* p7 A" Z# ]: p! q数据查询: Presto,Kylin ,Impala,Druid
0 ?( _( M. m) `1 L" L# C数据可视化: Echarts、Superset、QuickBI、DataV5 A! y2 M* H5 @; E8 \8 b* A
任务调度: Azkaban、Oozie
' ^8 F" u, B& z& {集群监控: Zabbix
* n. Q. X5 Y9 [6 j7 N6 v元数据管理: Atlas
: S$ a/ p9 K6 y! @/ y# q$ w: }- V
4 B9 t, p5 A7 ?4 W本论坛所有资源由10年架构精挑细选,告诉你该学什么,什么值得学," g% O: q" ^0 K6 T6 F& ]6 `6 A% V" Z
跟着程序源码论坛的课程学就对了,不再迷茫,技能get999+% X- B- \* M2 ?' D" r" N- n( E, J
. R5 c, Z( s+ _, v& W
! V6 l6 _. c# R; x+ ?' a
/ ?! R4 R0 T6 A% P+ }8 t
' S$ ^3 N% o* f9 K2 T9 ?* M* D8 U& p K. Q% [4 Q4 m+ L
! [% n& J& ?$ O5 A
|