概述
import requests
import urllib
from lxml import html
#需要爬数据的网址
j=0
#!s-p3
for k in range(1,20):
url='https://www.duitang.com/search/?kw=%E6%AD%A3%E5%A4%AA&type=feed'+'#!s-p'+str(k)
page=requests.Session().get(url)
tree=html.fromstring(page.text)
result=tree.xpath('//a[@class="a"]//img/@src') #获取需要的数据
for i in result:
urllib.request.urlretrieve(i,'C://Users//FangJZ//Desktop//duitan//'+(str(j))+'.jpg')
j=j+1
print('true')
最后
以上就是高大龙猫为你收集整理的为什么Python爬虫一直重复爬取第一页的内容的全部内容，希望文章能够帮你解决为什么Python爬虫一直重复爬取第一页的内容所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复