我是靠谱客的博主 舒适外套,这篇文章主要介绍最快的方法教你python爬虫,现在分享给大家,希望可以做个参考。

创建scrapy
命令:scrapy startproject mySpider_01
这里写图片描述
打开后效果:
这里写图片描述
组成介绍:
scrapy.cfg :项目的配置文件
mySpider_01/ :项目的Python模块,将会从这里引用代码
mySpider_01/items.py :项目的目标文件
mySpider_01/pipelines.py :项目的管道文件
mySpider_01/settings.py :项目的设置文件
mySpider_01/spiders/ :存储爬虫代码目录

1.打开mySpider_01目录下的items.py
2.Items 定义结构化数据字段,用来保存爬取到的数据
3. 可以通过创建一个 scrapy.Item 类。
4.接下来,创建一个ItcastItem 类,和构建item模型(model)

这里写图片描述

这里写图片描述
5.爬出数据生成文件
这里写图片描述
6.保存文件:方式四种,我习惯用:scrapy crawl itcast -o teachers.csv
这里写图片描述

最后

以上就是舒适外套最近收集整理的关于最快的方法教你python爬虫的全部内容,更多相关最快内容请搜索靠谱客的其他文章。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(64)

评论列表共有 0 条评论

立即
投稿
返回
顶部