1、用户行为数据采集平台搭建4 Y: c/ \' L: C- C# L9 h# u
2、业务数据采集平台搭建
$ {& v9 N2 v" P/ Q m+ b3、数据仓库维度建模2 z6 K2 |2 e0 S: `# ]5 _& r
4、分析，设备、会员、商品、地区、活动等电商核心主题
( D6 H) j1 [7 C ^- H' z9 F5、采用即席查询工具，随时进行指标分析
, z3 d# P7 E" V p4 F) o6、对集群性能进行监控，发生异常需要报警0 N. |4 g- I. M2 X" N. K" t
7、元数据管理7 Q. m! V7 r6 o8 z4 J' [$ ]3 }
8、质量监控
# U' D* j$ H* l4 j; N% ]; G& c' K5 M# I3 k9 B; _
数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,$ n& a* E9 u' s; X7 t3 h, k5 _' `
数据存储: MySql，HDFS，HBase，Redis，MongoDB
! P" v& M$ h/ v) C# q数据计算: Hive，Tez，Spark，Flink，Storm
8 D2 S/ u5 F& {数据查询: Presto，Kylin ,Impala，Druid5 b v7 m7 w* g
数据可视化: Echarts、Superset、QuickBI、DataV) b2 D6 @- v$ i1 v1 F: I$ l2 Q ?" ^1 {
任务调度: Azkaban、Oozie
( x1 V2 o: y4 M集群监控: Zabbix
. I* a. e& W" X元数据管理: Atlas
6 s; i9 N3 {. X4 j& m; {* O# S- r4 X
本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，
2 Y- W; b+ P: d- l/ R. ]跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
8 D; I: K' j2 a. }8 K7 t. ^, ^3 S) v w, g! ?" P
! x* ^; e# l2 g# |- W
' s. Q2 K2 s# i1 J v
& ]0 U o, Q6 l6 a t% p- k A+ n! u1 L, m; [- ?9 W( V
1 n6 ?' {9 W5 Q0 C; J$ ]7 ~. T
|
/1 
