一：技术选型
技术选型的主要考虑因素：数据量大小，业务需求，行业内经验，技术成熟度，开发维护成本，总成本预算。数据采集传输：flume，kafka，sqoop，logstash，dataX数据存储：mysql，hdfs，hbase，redis，mongoDB数据计算：hive，tez，spark，flink，storm数据查询：presto，druid，impala，kylin数据可视化：echarts，superset，quickBI，dataV任务调度：azkaban，oozie集群监控：zabbix
