Beautiful Soup插件学习使用参考：https://www.crummy.com/software/BeautifulSoup/bs4/doc.zh/#recursive 使用Beautiful Soup前的准备，先确保安装了该插件（该版本为：beautifulsoup4）： 通过pyth ...
分类：
编程语言 时间：
2018-10-24 15:16:19
阅读次数：
436
在上一次的学习实践中，我们以Tencent职位信息网站为例，介绍了在爬虫中如何分析待解析的网站结构，同时也说明了利用Xpath和lxml解析网站的一般化流程。在本节的实践中，我们将以中国天气网为例，并基于Beautiful Soup库对其进行数据解析，最后再简单说明pyecharts数据可视化。 中 ...
分类：
编程语言 时间：
2018-09-22 00:50:59
阅读次数：
361
恢复内容开始 python爬虫学习从0开始 第一次学习了python语法，迫不及待的来开始python的项目。首先接触了爬虫，是一个简单爬虫。个人感觉python非常简洁，相比起java或其他面向对象的编程语言，动态语言不需要声明函数或变量类型。python有20年的发展历史，以简洁高效闻名，pyt ...
分类：
编程语言 时间：
2018-08-13 00:42:02
阅读次数：
697
声明：本脚本纯属娱乐， 禁止用来非法自动点赞拉票！！！ ____ 闲话： 明日之子第二季开始好久了，作者一直再追，特别喜欢里面那个酷酷的小哥 蔡泽明。前两天晋选9大厂牌，采取的是直播的形式，选手是否会晋级纯靠粉丝手动点赞，而且特别坑的一点是点1000次才算一个赞，当时作者就想可不可以写个脚本自动点赞 ...
分类：
编程语言 时间：
2018-08-10 23:13:57
阅读次数：
230
2018/7/21，这几天整理出来的一些Python 爬虫学习代码。 import urllib2 response = urllib2.urlopen("http://baidu.com") html = response.read() print html 进一步，可以request impor ...
分类：
编程语言 时间：
2018-07-23 11:06:47
阅读次数：
155
1 import json 2 import re 3 from urllib.request import urlopen # urllib用法：https://www.jb51.net/article/65279.htm 4 5 # 思路：通过url获取网页内容--》匹配需要内容---》拿到内容... ...
分类：
编程语言 时间：
2018-07-13 20:47:30
阅读次数：
138
最近，在学习python爬虫时，用到各种库特性时，写小段代码，命名demo的py文件诸如：requests.py,json.py,csv.py.都会提示类似“module 'csv' has no attribute 'writer'”或者“module 'requests' has no attr ...
分类：
编程语言 时间：
2018-06-15 20:53:06
阅读次数：
490
爬虫是什么？爬虫其实就是获取网页的内容经过解析来获得有用数据并将数据存储到数据库中的程序。 基本步骤： 1.获取网页的内容，通过构造请求给服务器端，让服务器端认为是真正的浏览器在请求，于是返回响应。python有很多请求的库，像urllib，requests库等，个人比较喜欢requests库，很容 ...
分类：
编程语言 时间：
2018-06-15 00:01:25
阅读次数：
202
昨天刚买的崔大大的《Python3网络爬虫开发实战》，今天就到了，开心的读完了爬虫基础这一章，现记录下自己的浅薄理解，如有见解不到位之处，望指出。 1.HTTP的基本原理 ①我们经常会在浏览器输入www.baidu.com这一网址，这一网址到底是什么呢？其实这就是URL，即(Universal Re ...
分类：
编程语言 时间：
2018-06-14 21:02:53
阅读次数：
164
小说网 https://www.qu.la/paihangbang/ 功能：抓取每个排行榜内的小说名和对应链接，然后写入excel表格里面。 按F12 审查页面元素可以得到你所要的信息的class，从而来定位。 具体看代码讲解吧。 本次主要是记录编码问题。 编写完后run完出来是一个乱码的excel ...
分类：
编程语言 时间：
2018-06-08 19:30:42
阅读次数：
140
