0.可以新建一个用于练习的html文件，在浏览器中打开。 1.利用requests.get(url)获取网页页面的html文件 2.利用BeautifulSoup的HTML解析器，生成结构树 3.找出特定标签的html元素 soup.p #标签名，返回第一个 soup.head soup.p.nam ...
分类：
其他好文 时间：
2018-03-30 20:07:33
阅读次数：
157
可以新建一个用于练习的html文件，在浏览器中打开。 1.利用requests.get(url)获取网页页面的html文件 2.利用BeautifulSoup的HTML解析器，生成结构树 3.找出特定标签的html元素 soup.p #标签名，返回第一个 soup.head soup.p.name ...
分类：
其他好文 时间：
2018-03-30 13:19:37
阅读次数：
146
1.获取糗事百科url http://www.qiushibaike.com/hot/page/2/ 末尾2指第2页 2.分析页面，找到段子部分的位置， 需要一点CSS和HTML的知识 3、编写代码 4、执行以下，结果如下： ...
分类：
编程语言 时间：
2018-03-29 23:13:16
阅读次数：
352
Simple DOM Demo This is the document body This is paragraph 1. 段落2 广州商学院 我校校长杨文轩教授讲授新学期“思政第一课” 3月27日下午，我校校... ...
分类：
其他好文 时间：
2018-03-29 20:06:56
阅读次数：
197
1.利用requests.get(url)获取网页页面的html文件 import requests newsurl='http://news.gzcc.cn/html/xiaoyuanxinwen/' res = requests.get(newsurl) #返回response对象 res.en ...
分类：
其他好文 时间：
2018-03-29 20:02:27
阅读次数：
127
0.可以新建一个用于练习的html文件，在浏览器中打开。 1.利用requests.get(url)获取网页页面的html文件 import requests newsurl='http://news.gzcc.cn/html/xiaoyuanxinwen/' res = requests.get( ...
分类：
其他好文 时间：
2018-03-29 13:30:57
阅读次数：
156
之前学习了正则表达式，但是发现如果用正则表达式写网络爬虫，那是相当的复杂啊！于是就有了Beautiful Soup简单来说，Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据。Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树... ...
分类：
编程语言 时间：
2018-03-28 20:27:14
阅读次数：
178
web抓取，利用程序下载处理web，让在python中抓取网页变得容易 webbrowser :python自带的浏览器 requests:从因特网上下载文件和网页 Beautiful Soup:解析HTML，即网页编写的格式 selenium：启动并控制一个web浏览器，selenium能填写表单 ...
分类：
其他好文 时间：
2018-03-28 15:42:40
阅读次数：
227
Beautiful Soup 4.2.0文档阅读笔记 环境： macOS High Sierra version 10.13.2 "Beautiful Soup 4.2.0 文档" 安装Beautiful Soup "关于easy_install和pip" 安装解析器 检测是否安装成功 如上图，则安 ...
分类：
其他好文 时间：
2018-03-26 20:44:27
阅读次数：
166
使用Beautiful Soup库，先看一个例子： 下面介绍BS库的基本元素： BS库时解析、遍历、维护”标签树“的功能库，标签树可理解为一个字符串，就是<>...<>之间的内容 我们认为 html文档-标签树-Beautiful Soup类是等价的 BS库解析器; BS类的基本元素 解析后的网页代 ...
分类：
其他好文 时间：
2018-03-26 12:41:14
阅读次数：
179
