概述
爬虫有时候是需要登录的,如果有复杂的验证码就不方便模拟登录了
这里直接使用浏览器保存的cookie等身份信息进行爬虫,免去登录的过程(如果cookie不是关闭浏览器就失效)
这里使用selenium +chrome,先在chrome上登录好,之后关闭浏览器使用脚本即可
from selenium import webdriver
option = webdriver.ChromeOptions()
#使用原有chrome的登录信息,注意:需要关闭原chrome
option.add_argument(r'user-data-dir=C:\Users\GiaoAppData\Local\Google\Chrome\User Data')
driver =webdriver.Chrome(executable_path="C:Program FilesGoogleChromeApplicationchromedriver.exe",chrome_options=option)
有了driver之后就直接模拟爬虫吧
最后
以上就是贪玩红酒为你收集整理的python使用浏览器保存的身份凭证进行爬虫的全部内容,希望文章能够帮你解决python使用浏览器保存的身份凭证进行爬虫所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复