Spark_通过Spark实现ip地址查询
标题1.需求分析2.数据准备3.代码思路4.代码1.需求分析在互联网中,我们经常会见到城市热点图这样的报表数据,例如在百度统计中,会统计今年的热门旅游城市、热门报考学校等,会将这样的信息显示在热点图中。我们根据每个用户的IP地址,与我们的IP地址段进行比较,确认每个IP落在哪一个IP端内,获取经纬度,然后绘制热力图我们需要通过日志信息(运行商或者网站自己生成)和城市ip段信息来判断用户的ip段,统计热点经纬度。2.数据准备ip日志信息:在ip日志信息中,只需要关心ip这一个维度就可以了