概述
创建scrapy
命令:scrapy startproject mySpider_01
打开后效果:
组成介绍:
scrapy.cfg :项目的配置文件
mySpider_01/ :项目的Python模块,将会从这里引用代码
mySpider_01/items.py :项目的目标文件
mySpider_01/pipelines.py :项目的管道文件
mySpider_01/settings.py :项目的设置文件
mySpider_01/spiders/ :存储爬虫代码目录
1.打开mySpider_01目录下的items.py
2.Items 定义结构化数据字段,用来保存爬取到的数据
3. 可以通过创建一个 scrapy.Item 类。
4.接下来,创建一个ItcastItem 类,和构建item模型(model)
5.爬出数据生成文件
6.保存文件:方式四种,我习惯用:scrapy crawl itcast -o teachers.csv
最后
以上就是舒适外套为你收集整理的最快的方法教你python爬虫的全部内容,希望文章能够帮你解决最快的方法教你python爬虫所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复