beautifulsoup之CSS选择器 BeautifulSoup支持大部分的CSS选择器，其语法为：向tag或soup对象的.select()方法中传入字符串参数，选择的结果以列表形式返回。 tag.select("string") BeautifulSoup.select("string") ...
分类：
其他好文 时间：
2021-06-21 20:26:48
阅读次数：
0
soup = BeautifulSoup(html,"html.parser")# -- coding: utf-8 -- """ Created on Tue Jun 8 09:55:53 2021 @author: Administrator """ from bs4 import Beauti ...
分类：
编程语言 时间：
2021-06-08 23:05:26
阅读次数：
0
模块的定义 模块本质上就是.py文件（脚本就是py.文件，长期保存代码的文件） 模块可以提高开发效率，便于维护管理 模块的两个功能：1.自己用 脚本 2.被别人引用· 模块的分类 内置模块(200种左右)：python解释器，自带的模块，time,os,sys...... 第三方模块（6000多种） ...
分类：
其他好文 时间：
2021-06-05 17:33:53
阅读次数：
0
最近开始学爬虫，第一步是安装BeautifulSoup这个库，其实我对于安装库并不是很熟悉，借这次机会总结一下安装库的过程。 一、下载库文件 二、解压（下载到的文件可能是.tar.gz文件，这种文件需要解压一次变成.tar文件，再解压一次变成易读文件，解压工具7z即可） 三、找到“setup.py” ...
分类：
编程语言 时间：
2021-06-02 13:17:41
阅读次数：
0
BeautifulSoup4库：和lxml一样，Beautiful Soup也是一个HTML/XML的解析器，主要的功能也是如何解析和提取HTML/XML数据。lxml只会局部遍历，而Beautiful Soup是基于HTML DOM(Document Object Model)的，会载入整个文档， ...
分类：
其他好文 时间：
2021-03-06 14:16:08
阅读次数：
0
import requests from bs4 import BeautifulSoup import bs4 def getHTMLText(url): try: r = requests.get(url,timeout=30) r.raise_for_status() # 如果状态不是200， ...
分类：
其他好文 时间：
2020-12-19 12:33:55
阅读次数：
1
一、给定url，直接下载到本地 import re import requests from bs4 import BeautifulSoup def get_gif(url, a): response = requests.get(url) # 自己电脑上的文件夹路径，默认命名 a.gif wit ...
分类：
编程语言 时间：
2020-12-07 12:35:37
阅读次数：
6
bs4 全名 BeautifulSoup，是编写 python 爬虫常用库之一，主要用来解析 html 标签。 一、初始化 from bs4 import BeautifulSoup soup = BeautifulSoup("<html>A Html Text</html>", "html.par ...
分类：
其他好文 时间：
2020-10-14 20:26:32
阅读次数：
33
什么是爬虫? 编写程序, 模拟浏览器访问服务器, 从而获取动态资源 爬虫基本流程 发送请求 通过模块或库模拟浏览器, 向目标站点发送请求, 请求可以携带headers和参数等信息, 然后等待服务器响应 获取响应 服务器正常响应, 会返回一个response, 即页面内容, 可能是html, json ...
分类：
其他好文 时间：
2020-09-08 20:44:36
阅读次数：
43
1.BeautifulSoup简介 BeautifulSoup4和 lxml 一样，Beautiful Soup 也是一个HTML/XML的解析器，主要的功能也是如何解析和提取 HTML/XML 数据。 BeautifulSoup支持Python标准库中的HTML解析器,还支持一些第三方的解析器，如 ...
分类：
编程语言 时间：
2020-08-18 15:44:46
阅读次数：
114
