1、用户行为数据采集平台搭建. U' T1 L& O8 C1 v( e
2、业务数据采集平台搭建
! o; D; ?5 T5 w+ y" Q: N- y3、数据仓库维度建模
, z, H* t" A0 j) \$ q4、分析，设备、会员、商品、地区、活动等电商核心主题
& `9 Y! r( j4 b3 M5、采用即席查询工具，随时进行指标分析
8 X# ^8 o% V9 v6 [2 i/ F2 y6、对集群性能进行监控，发生异常需要报警# ~2 C% S( A, x! o) ?' ~
7、元数据管理- l/ G }. H# T% N
8、质量监控
2 r( U5 Q: C, H+ l' R# k- ]
/ F5 o! U+ L; b$ H% O数据采集传输: Flume，Kafka，Sqoop ,Logstash，DataX,/ E/ Y: m( i, _
数据存储: MySql，HDFS，HBase，Redis，MongoDB2 a( g }. w0 `% V) P$ B7 K# l
数据计算: Hive，Tez，Spark，Flink，Storm' q7 V; `! E! {5 u1 \
数据查询: Presto，Kylin ,Impala，Druid8 W& a9 m5 M2 u
数据可视化: Echarts、Superset、QuickBI、DataV: D! e9 n% a( ~# { Z% e
任务调度: Azkaban、Oozie
, X/ J! b5 u6 o5 P1 W8 J6 r集群监控: Zabbix9 Q5 i6 k- f o- u. E& ]% K L
元数据管理: Atlas$ Q1 k l$ b O( ^" E% O
0 i" M' i( [4 v& G本论坛所有资源由10年架构精挑细选，告诉你该学什么，什么值得学，8 @1 K$ ~! ?# y) M+ ^ C
跟着程序源码论坛的课程学就对了，不再迷茫，技能get999+, L9 P1 D$ C; q1 n( Z9 D# h
5 E, u0 S& }3 L; }! f+ ]$ K% ^
$ u+ I+ A) M0 L9 q' ?# ^
6 {7 j. \8 k5 E% F2 p% w# l( q9 m: T! F* F3 S$ G
! e( y8 d3 ^! _4 U. V- f
l5 M0 {. s/ m8 k9 s
|
/1 
