码迷,mamicode.com
首页 > Web开发 > 详细

爬取下厨房网站菜名与食材

时间:2019-03-21 10:23:42      阅读:454      评论:0      收藏:0      [点我收藏+]

标签:uil   pre   imp   数据   for   string   启动   requests   info   

方法一:

import requests
# 引用requests库
from bs4 import BeautifulSoup
# 引用BeautifulSoup库

res_foods = requests.get(‘http://www.xiachufang.com/explore/‘)
# 获取数据
bs_foods = BeautifulSoup(res_foods.text,‘html.parser‘)
# 解析数据
list_foods = bs_foods.find_all(‘div‘,class_=‘info pure-u‘)
# 查找最小父级标签

list_all = []
# 创建一个空列表,用于存储信息

for food in list_foods:

tag_a = food.find(‘a‘)
# 提取第0个父级标签中的<a>标签
name = tag_a.text[17:-13]
# 菜名,使用[17:-13]切掉了多余的信息
URL = ‘http://www.xiachufang.com‘+tag_a[‘href‘]
# 获取URL
tag_p = food.find(‘p‘,class_=‘ing ellipsis‘)
# 提取第0个父级标签中的<p>标签
ingredients = tag_p.text[1:-1]
# 食材,使用[1:-1]切掉了多余的信息
list_all.append([name,URL,ingredients])
# 将菜名、URL、食材,封装为列表,添加进list_all

for i in list_all:
print (i)
# 打印



方法二:

import requests
# 引用requests库
from bs4 import BeautifulSoup
# 引用BeautifulSoup库

res_foods = requests.get(‘http://www.xiachufang.com/explore/‘)
# 获取数据
bs_foods = BeautifulSoup(res_foods.text,‘html.parser‘)
# 解析数据

tag_name = bs_foods.find_all(‘p‘,class_=‘name‘)
# 查找包含菜名和URL的<p>标签
tag_ingredients = bs_foods.find_all(‘p‘,class_=‘ing ellipsis‘)
# 查找包含食材的<p>标签
list_all = []
# 创建一个空列表,用于存储信息
for x in range(len(tag_name)):
# 启动一个循环,次数等于菜名的数量
    list_food = [tag_name[x].text[18:-14],tag_name[x].find(‘a‘)[‘href‘],tag_ingredients[x].text[1:-1]]
    # 提取信息,封装为列表。注意此处[18:-14]切片和之前不同,是因为此处使用的是<p>标签,而之前是<a>
    list_all.append(list_food)
    # 将信息添加进list_all
for i in list_all:
print (i)
# 打印
 

爬取下厨房网站菜名与食材

标签:uil   pre   imp   数据   for   string   启动   requests   info   

原文地址:https://www.cnblogs.com/baqycl/p/10569806.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!