概述
本节书摘来自异步社区《用Python写网络爬虫》一书中的第1章,第1.5节,作者 [澳]Richard Lawson(理查德 劳森),李斌 译,更多章节内容可以访问云栖社区“异步社区”公众号查看。
1.5 本章小结
本章介绍了网络爬虫,然后开发了一个能够在后续章节中复用的成熟爬虫。此外,我们还介绍了一些外部工具和模块的使用方法,用于了解网站、用户代理、网站地图、爬取延时以及各种爬取策略。
下一章中,我们将讨论如何从已爬取到的网页中获取数据。
最后
以上就是单身彩虹为你收集整理的《用Python写网络爬虫》——1.5 本章小结的全部内容,希望文章能够帮你解决《用Python写网络爬虫》——1.5 本章小结所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复