1、用户行为数据采集平台搭建2 w: M" w/ r+ J- {3 o# I6 I2 z
2、业务数据采集平台搭建
- W- H3 O0 c6 V) h7 S3、数据仓库维度建模7 z0 L, w& Y7 \
4、分析,设备、会员、商品、地区、活动等电商核心主题 Z! v7 x" j# j+ Z$ T* S
5、采用即席查询工具,随时进行指标分析- O: G4 Q3 N: M+ G( [
6、对集群性能进行监控,发生异常需要报警
# @; ]9 A& L$ q+ _2 W7、元数据管理3 d9 L% }# x" z/ r, x/ ~% T
8、质量监控/ w4 r3 d( X' o% a" C, ^) z Z
& I( {( J+ b: O
数据采集传输: Flume,Kafka,Sqoop ,Logstash,DataX,1 W6 d& L$ X+ @) ^7 h6 `
数据存储: MySql,HDFS,HBase,Redis,MongoDB
0 P/ ?& \# [9 L2 s% t. ?数据计算: Hive,Tez,Spark,Flink,Storm
" `$ v9 ]1 p1 L: q0 g数据查询: Presto,Kylin ,Impala,Druid
& U. m, g# P b数据可视化: Echarts、Superset、QuickBI、DataV2 J; A2 j4 V8 t9 ?& r- p% W
任务调度: Azkaban、Oozie! k* T# X& R; a! k6 w: T' J
集群监控: Zabbix0 O- {2 A3 w+ k1 S9 F4 X( ~
元数据管理: Atlas
. ]) k M- L) L9 q N4 j: h/ y( W7 b: h, L* _
本论坛所有资源由10年架构精挑细选,告诉你该学什么,什么值得学,
+ v! l/ r3 d9 F/ p) C: l$ @3 v跟着程序源码论坛的课程学就对了,不再迷茫,技能get999+
6 _ K3 k3 \' U, Y* K+ U& X" d% N) F U& Y0 R1 F* m6 B& y
; u# J( ^- L0 j& ^& J1 F
( R: g# h$ S2 C: F. C- O
+ p. E$ S* ~3 c6 T# _3 ?0 G( J- l% @ {" h' a( z4 J
+ |+ }' ^: D) y6 Q$ s2 N2 o
|