创建scrapy
命令:scrapy startproject mySpider_01
打开后效果:
组成介绍:
scrapy.cfg :项目的配置文件
mySpider_01/ :项目的Python模块,将会从这里引用代码
mySpider_01/items.py :项目的目标文件
mySpider_01/pipelines.py :项目的管道文件
mySpider_01/settings.py :项目的设置文件
mySpider_01/spiders/ :存储爬虫代码目录
1.打开mySpider_01目录下的items.py
2.Items 定义结构化数据字段,用来保存爬取到的数据
3. 可以通过创建一个 scrapy.Item 类。
4.接下来,创建一个ItcastItem 类,和构建item模型(model)
5.爬出数据生成文件
6.保存文件:方式四种,我习惯用:scrapy crawl itcast -o teachers.csv
最后
以上就是舒适外套最近收集整理的关于最快的方法教你python爬虫的全部内容,更多相关最快内容请搜索靠谱客的其他文章。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复