import requests
import urllib
from lxml import html
#需要爬数据的网址
j=0
#!s-p3
for k in range(1,20):
url='https://www.duitang.com/search/?kw=%E6%AD%A3%E5%A4%AA&type=feed'+'#!s-p'+str(k)
page=requests.Session().get(url)
tree=html.fromstring(page.text)
result=tree.xpath('//a[@class="a"]//img/@src') #获取需要的数据
for i in result:
urllib.request.urlretrieve(i,'C://Users//FangJZ//Desktop//duitan//'+(str(j))+'.jpg')
j=j+1
print('true')
最后
以上就是高大龙猫最近收集整理的关于为什么Python爬虫一直重复爬取第一页的内容的全部内容，更多相关为什么Python爬虫一直重复爬取第一页内容请搜索靠谱客的其他文章。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复