1、用户行为数据采集平台搭建
7 L) [4 `; f1 C; `& {/ l7 }2、业务数据采集平台搭建6 k) a6 m! y7 a: `0 B1 _* B$ L
3、数据仓库维度建模
. U' o$ B. C9 P5 k/ h5 _4、分析，设备、会员、商品、地区、活动等电商核心主题; F6 @4 k8 D6 r b
5、采用即席查询工具，随时进行指标分析' u) b5 i. q: R, V) R' S
6、对集群性能进行监控，发生异常需要报警, |' x) W; a3 B J% T1 J2 M S" g
7、元数据管理
/ U9 P6 ^1 X `9 L+ R8、质量监控
! H; j& V0 \/ Q: i$ g& S6 |4 s) C' c% ]& }$ J0 z: A
数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,
9 i2 M6 r! ~: k: m数据存储: MySql，HDFS，HBase，Redis，MongoDB R6 c3 A) z6 ~! W
数据计算: Hive，Tez，Spark，Flink，Storm6 M+ A; q7 G. u+ i: T
数据查询: Presto，Kylin ,Impala，Druid F8 X) b# G9 X
数据可视化: Echarts、Superset、QuickBI、DataV
, o' w5 Q& O9 P任务调度: Azkaban、Oozie+ y+ j& x+ G7 F! ^
集群监控: Zabbix) {3 {7 c0 s) s4 s& g( H
元数据管理: Atlas$ S" B: j6 Y0 p ]2 t
9 `/ c/ W/ s; r7 P* T0 u+ L
本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，* [ A: M/ e) G! S
跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+
; A# o+ z& V$ y0 B8 T/ {9 m7 w% i# v6 H- Q' Y9 b
5 C9 v- ]4 h" I5 w) x
5 p! e1 [5 k; p: P9 x
/ [8 C& |, q! }6 s; s3 _" d% v: H* g& M% V
- Z; d! R6 v. }% ~
|
/1 
