1、用户行为数据采集平台搭建
3 c$ z( j8 b! M2、业务数据采集平台搭建
7 n* ?9 E$ ]$ F3、数据仓库维度建模
- a9 U1 U3 E e/ S* w3 I2 c3 v5 {4、分析，设备、会员、商品、地区、活动等电商核心主题' ^: Q& ?( v# j3 X$ I
5、采用即席查询工具，随时进行指标分析
( K8 j0 `( J- j; w& R+ X- S6、对集群性能进行监控，发生异常需要报警
1 L- @' h0 g w5 U2 z9 `7、元数据管理
2 ^3 [+ E8 d; y, F4 Z8、质量监控
" a" w7 Q% |: S, }3 n# k" ]. x
数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,! O7 {; F! F0 n7 Z1 i; r# c" g& ]
数据存储: MySql，HDFS，HBase，Redis，MongoDB
# t; g( l. a1 J: m4 h; L数据计算: Hive，Tez，Spark，Flink，Storm
9 {5 O2 V E' k" ?1 O- K6 y数据查询: Presto，Kylin ,Impala，Druid
0 S( D9 b$ M7 f. p# H6 J$ B数据可视化: Echarts、Superset、QuickBI、DataV6 a2 t; x! v6 J7 j5 A/ y9 n
任务调度: Azkaban、Oozie Y% Y) K# G! A0 U. v, p& x8 A
集群监控: Zabbix+ p2 L& ^1 ^# I+ K
元数据管理: Atlas1 ~4 G7 O2 ~+ |( e$ J x( C
5 p: B: Q# W7 V' Z" B8 u5 }6 l
本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，4 S* Q4 \7 n z8 n9 g
跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
! w0 {4 ?7 s( D( |: T" x) y! p- V# t3 O2 t( k
6 {' G6 K2 g! h
1 C9 A* g+ Z: o; t4 j9 p* z! ?' D
, ~+ q1 z+ b0 L& y C
' ]9 ?7 y9 x7 T a) ^( u: c5 i* `! T4 b3 g- `
|
/1 
