概述
coding=gbk
import urllib.request
import cookielib
在 Python3 中改名为 http.cookiejar 了,
如果你用 Python3 的话要注意
import http.cookiejar
url = “http://www.doyouhike.net/dest”
print ((‘第一种方法’))
response1 = urllib.request.urlopen(url)
打印状态码,查看请求是否成功
print response1.getcode()
print (len(response1.read()))
print ((“第二种方法”))
request = urllib.request.Request(url)
request.add_header(“user-agent”, “Mozilla/5.0”)
response2 = urllib.request.urlopen(request)
print (response1.getcode())
print (len(response1.read()))# 内容的长度
print ((‘第三种方法’))
cj = http.cookiejar.CookieJar()
opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj))
urllib.request.install_opener(opener)
response3 = urllib.request.urlopen(url)
print (response1.getcode())
第三种方法打印cookie的内容
打印网页的内容
print (len(response1.read()))
”’
打印结果如下:
第一种方法
80046
第二种方法
200
0
第三种方法
200
0
”’
”’
问题:
1.编码
解决:在代码首行添加# coding=gbk
2.cj = cookielib.CookieJar()报错
解决:import http.cookiejar
cj = http.cookiejar.CookieJar()
3.无效字符
解决:print (“打印的内容需要包含在括号里面,不同于python 2x”)
”’
最后
以上就是自信蚂蚁为你收集整理的爬虫小程序-02coding=gbkimport cookielib在 Python3 中改名为 http.cookiejar 了,如果你用 Python3 的话要注意打印状态码,查看请求是否成功print response1.getcode()第三种方法打印cookie的内容打印网页的内容的全部内容,希望文章能够帮你解决爬虫小程序-02coding=gbkimport cookielib在 Python3 中改名为 http.cookiejar 了,如果你用 Python3 的话要注意打印状态码,查看请求是否成功print response1.getcode()第三种方法打印cookie的内容打印网页的内容所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
发表评论 取消回复