python 用爬虫爬取的大量数据怎么保存到本地
前言用爬虫爬取的大量数据怎么保存到本地,本文以保存到Excel为例。1.先导入爬虫所需的库说明一下,引入xlsxwriter这个库,主要是为了将数据写入Excel;我这里用到的是xpath,当然了你也可以选择bs4或者正则。2.选取你要爬取的url地址,将地址赋值给一个变量url,别忘了添加一个请求头信息’User-Agent’。3.对想要爬取的页面进行解析4.接着利用xpath方法,提起页面源代码里面想要的信息需要注意的是,这里在python3中用print方法输出的内容是一个隐藏的对象,后