1、用户行为数据采集平台搭建
2 L( l# i; l) K" g2、业务数据采集平台搭建 t9 z- ]7 g6 p$ J
3、数据仓库维度建模
. ?1 S+ h3 \' l8 i2 r) D7 B/ ^4、分析，设备、会员、商品、地区、活动等电商核心主题
" l6 X# i& T0 a; z/ q5、采用即席查询工具，随时进行指标分析; w M" Q! {2 A. o
6、对集群性能进行监控，发生异常需要报警% k" `% T% X- e$ p2 A
7、元数据管理
6 P5 E& ~$ Q+ O" s3 s2 O8、质量监控
: D& T5 R8 T- g! {( i; }7 I! W+ A7 D+ p/ J
数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,; R2 S. S( Y: d3 V: j& q6 c
数据存储: MySql，HDFS，HBase，Redis，MongoDB
, E$ q" W& j3 E; d数据计算: Hive，Tez，Spark，Flink，Storm7 N, y( q# Y( d# m/ S' M$ f7 V
数据查询: Presto，Kylin ,Impala，Druid8 e" l0 h7 H1 i7 o
数据可视化: Echarts、Superset、QuickBI、DataV" Y. f+ m* I; j7 \6 A
任务调度: Azkaban、Oozie5 |& ~! [8 \0 R3 F/ d9 h
集群监控: Zabbix
: G/ b8 C2 _, _; h3 F O* A元数据管理: Atlas. |1 D" ^- w" O3 m/ b/ h/ p) m& G, D& V
, ~* w! x- R. ^- E' m本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，
1 U+ q7 q' F0 }! ^0 {跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+. n) J( }& k5 S: Z0 g4 ^1 Q+ Z( E8 v
' p. p! S! A% ], }2 q6 {3 Q# E
1 H, D \9 U2 N$ m! m5 J; b' \
M, s0 `% {' Y* V9 U
3 c9 ]7 @+ l7 i
- o1 [( b, E% X7 s. U. B1 ]2 j8 `
$ y1 `: b- j7 v |
/1 
