甜蜜学姐

文章
8
资源
1
加入时间
2年10月17天

大数据可视化之Nginx日志分析及web图表展示(HDFS+Flume+Spark+Nginx+Highcharts)

项目需求:采集1-3台机器的nginx的access.log(/var/log/nginx/access.log)实时保存在HDFS中使用spark对当天的日志进行汇总分析在web界面中以图表的形式展示出来,需要体现如下2个表:1:哪个URL访问数量最大,按访问量从多到少排序展示出来2:哪些IP访问造成404错误最多,按从多到少排序展示出来提高练习:使用spark对所有...