1、用户行为数据采集平台搭建
8 ^8 y4 F( h; C W1 R2、业务数据采集平台搭建8 w+ s2 | W% _* }, w& C* [+ A* l
3、数据仓库维度建模
; D$ r% e# v1 t+ H1 r( M4、分析，设备、会员、商品、地区、活动等电商核心主题
+ l8 b7 ?4 @& j/ \. V6 s% a5、采用即席查询工具，随时进行指标分析+ t2 F5 z3 h( k9 k2 r* u. [
6、对集群性能进行监控，发生异常需要报警
' Y: h$ ?: @5 F7、元数据管理0 \# \* l; f7 s" L, ~- t3 U) M d
8、质量监控+ l) n9 P6 r: L$ p; g; ~# P0 R0 |
, C$ u, W/ X1 X3 U& s: f+ C
数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,
2 I0 e/ q- G8 q( N# j' Q6 W数据存储: MySql，HDFS，HBase，Redis，MongoDB
& r& q' _) S. e% e8 w$ _数据计算: Hive，Tez，Spark，Flink，Storm
, w; @6 |3 g+ }4 \数据查询: Presto，Kylin ,Impala，Druid
' G! \- q m5 Q* z2 _* J. A& J数据可视化: Echarts、Superset、QuickBI、DataV, d3 R K+ ]0 _9 U( P
任务调度: Azkaban、Oozie
" j3 r. A/ |* T集群监控: Zabbix t6 ^. ?4 u" i4 e" d$ {$ O5 ?0 g, }+ T9 m
元数据管理: Atlas4 R( c$ l/ ` g7 i& \
0 ?5 m5 H* P) J$ K7 z' i; @
本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，
& ~' z" q/ k( j# }2 f9 h( |/ f/ h/ L跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
1 g: r9 [6 |1 |1 w! T- h0 b$ F$ E! Z* q- [* V' U
+ R9 y; d* o8 p7 |0 V+ v# H4 i n
# m* N- A) ?6 t' `% y; R5 M- B% c. V3 C& y/ Z; n
. [( b# g0 ~6 L! ]& m& m4 F# S
0 S! ^$ ^8 [ {! E7 {8 J3 Z |
/1 
