最近在学习爬虫，爬取豆瓣电影Top250电影名称、评分。
不是很困难，大佬直接忽略吧~
直接上代码了。
复制代码
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18import requests from bs4 import BeautifulSoup for i in range (0,10): url = "https://movie.douban.com/top250?start="+(str(i*25)) #获取网页 response = requests.get(url) #解析网页 soup = BeautifulSoup(response.text,"html.parser") movie_list = soup.find_all(name='div',attrs={'class':'info'}) #print(movie_list) print("n"+str(i+1)+" 页:n") #遍历网页信息 for movie_information in movie_list: m_name = movie_information.find(name = 'span',class_ = 'title').text m_score = movie_information.find(name = 'span',class_='rating_num').text print(m_name+" "+m_score)
在使用requests从网页把源码爬下来之后，需要从网页中提取数据，也就是要对网页有一个解析。
最近在学习解析网页的三种方法，分别是正则表达式‘BeauSoup和lxml。
这次我用的是BeautifulSoup解析网页。
find，和find_all 参考链接：https://www.cnblogs.com/keye/p/7868059.html
最后
以上就是大胆大侠最近收集整理的关于python爬取豆瓣电影名称、评分的全部内容，更多相关python爬取豆瓣电影名称、评分内容请搜索靠谱客的其他文章。
本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。
发表评论 取消回复