def get_xueqiu_stock(): headers = {'X-Requested-With': 'XMLHttpRequest', 'Referer': 'http://xueqiu.com/p/ZH010389', 'User-Agent': 'Mozilla/5.0 (Window ...
分类:
其他好文 时间:
2020-06-11 19:57:33
阅读次数:
415
Cookies的处理 作用 在爬虫中如果遇到了cookie的反爬如何处理? 案例 爬取雪球网中的新闻资讯数据:https://xueqiu.com/ ...
分类:
编程语言 时间:
2020-01-12 18:10:07
阅读次数:
174
一 爬虫原理 1.什么是互联网? 指的是由一堆网络设备,把一台台的计算机互联网到一起称之为互联网。 2.互联网建立的目的?互联网建立的目的是为了数据的传递以及数据的共享。 3.什么是数据?例如淘宝、京东商品信息等...东方财富、雪球网的一些证券投资信息...链家、自如等房源信息....12306的票 ...
分类:
编程语言 时间:
2019-06-27 00:58:51
阅读次数:
164
今日内容: 一 爬虫原理 二 Requests请求库 一 爬虫原理 1.什么是互联网? 指的是由一堆网络设备,把一台台的计算机互联网到一起称之为互联网。 2.互联网建立的目的? 互联网建立的目的是为了数据的传递以及数据的共享。 3.什么是数据? 例如淘宝、京东商品信息等... 东方财富、雪球网的一些 ...
分类:
编程语言 时间:
2019-06-27 00:56:27
阅读次数:
104
最近一直在学习MySQL数据库,很感兴趣。这次我做了一个简单的尝试,使用Python3.4与MySQL数据库进行交互,将一份从雪球网上下载的某股票数据上传至MySQL数据库。仅为初学者提供参考,高手请不要见笑。 代码已上传至github,欢迎关注: https://github.com/Joshua ...
分类:
数据库 时间:
2016-08-26 22:34:29
阅读次数:
251
Previouson系列教程:互联网金融爬虫怎么写-第一课p2p网贷爬虫(XPath入门)互联网金融爬虫怎么写-第二课雪球网股票爬虫(正则表达式入门)互联网金融爬虫怎么写-第三课雪球网股票爬虫(ajax分析)哈哈,我又来了,话说出教程就是这么任性,咱们乘热打铁,把上节课分析完成..
分类:
其他好文 时间:
2016-07-29 19:34:37
阅读次数:
268
系列教程:互联网金融爬虫怎么写-第一课p2p网贷爬虫(XPath入门)上一节课我们一起通过一个p2p网贷爬虫,深入了解了一下XPath以及其在最终实际使用中的写法。可以毫不夸张的说,对于写简单爬虫来说,最最重要的,就是使用好XPath,以及这一课要讲的正则表达式。正则表达式,又..
分类:
其他好文 时间:
2016-05-23 19:15:22
阅读次数:
159
系列教程: 互联网金融爬虫怎么写-第一课 p2p网贷爬虫(XPath入门) 上一节课我们一起通过一个p2p网贷爬虫,深入了解了一下XPath以及其在最终实际使用中的写法。可以毫不夸张的说,对于写简单爬虫来说,最最重要的,就是使用好XPath,以及这一课要讲的正则表达式。 正则表达式,又称正规表示法、 ...
分类:
其他好文 时间:
2016-05-23 17:04:55
阅读次数:
178
小鱼常用信源 编程 CSDN博客 慕课网 极客学院 菜鸟教程 eoe社区 安卓BUS 安卓学习手册 经济 雪球网 MBA智库百科 东方财富网 华尔街见闻 乐晴智库 经济学人 长投学堂 文学 360doc图书馆 文章阅读网 国学论坛 读远电子书库 简书 豆瓣读书 ...
分类:
其他好文 时间:
2015-08-21 23:09:37
阅读次数:
227