标签:each urllib 循环 ima 爬取 目标 png from beautiful
import requests from bs4 import BeautifulSoup import time import os import urllib #需要爬取的目标网页 link=‘https://www.zhihu.com/hot‘ #对网页进行解析 soup=BeautifulSoup(r.text,‘lxml‘) #获取到热榜对应的那部分内容 title_list=soup.find_all(‘section‘,class_=‘HotItem‘) #循环爬取相关内容 for each in title_list[0:10]: index=each.find(‘div‘,class_=‘HotItem-rank‘).text#排名 title=each.find(‘h2‘,class_=‘HotItem-title‘).text#标题 number=each.find(‘div‘,class_="HotItem-metrics").text[0:-3]#热度 print(index,title,number)
标签:each urllib 循环 ima 爬取 目标 png from beautiful
原文地址:https://www.cnblogs.com/c---y/p/12529865.html