一、网络爬虫入门一、都有哪些爬虫？二、网络爬虫是否合法？三 、网络爬虫的约束。（Robots协议）四、python网络爬虫的流程。
文章目录一、都有哪些爬虫？二、网络爬虫是否合法？1.引入库2.读入数据三 、网络爬虫的约束。四、python网络爬虫的流程。总结一、都有哪些爬虫？网络爬虫按照系统结构和实现技术，大致可以分为以下几种类型：通用网络爬虫、聚焦网络爬虫、增量式网络爬虫、深层网络爬虫。实际的网络爬虫系统通常是几种爬虫技术相结合实现的。搜索引擎（Search Engine），例如传统的通用搜索引擎baidu、Yahoo和Google等，是一种大型复杂的网络爬虫，属于通用性网络爬虫的范畴。但是通用性搜索引擎存在着一定的局限
