我是靠谱客的博主 贪玩红酒,最近开发中收集的这篇文章主要介绍python使用浏览器保存的身份凭证进行爬虫,觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

爬虫有时候是需要登录的,如果有复杂的验证码就不方便模拟登录了

这里直接使用浏览器保存的cookie等身份信息进行爬虫,免去登录的过程(如果cookie不是关闭浏览器就失效)

这里使用selenium +chrome,先在chrome上登录好,之后关闭浏览器使用脚本即可

from selenium import webdriver
option = webdriver.ChromeOptions()
#使用原有chrome的登录信息,注意:需要关闭原chrome
option.add_argument(r'user-data-dir=C:\Users\GiaoAppData\Local\Google\Chrome\User Data')
driver =webdriver.Chrome(executable_path="C:Program FilesGoogleChromeApplicationchromedriver.exe",chrome_options=option)

有了driver之后就直接模拟爬虫吧 

最后

以上就是贪玩红酒为你收集整理的python使用浏览器保存的身份凭证进行爬虫的全部内容,希望文章能够帮你解决python使用浏览器保存的身份凭证进行爬虫所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(79)

评论列表共有 0 条评论

立即
投稿
返回
顶部