探索asyncio中的协程嵌套,以及在爬虫设计上的应用1. 前言2. 协程嵌套3. 协程嵌套在爬虫设计上的应用4. 一些有点坑但必须了解的知识点5. 参考资料
1. 前言本文介绍Python库asyncio中的协程嵌套与并行,以及在爬虫设计中的应用。2. 协程嵌套为什么要嵌套协程?现实中的程序往往是一环套一环,比如爬虫获取网页后,可能还需要进行解析,可能还需要再进入一堆页面,可能还需要再对这些页面进一步解析,然后返回解析后的结果。2.1 单个协程单个协程的情况非常简单:async def task(num): ''...