现在用下面这个案例来演示如果爬取安居客上面深圳的租房信息,我们采取这样策略,首先爬取所有租房信息的链接地址,然后再根据爬取的地址获取我们所需要的页面信息。访问次数多了,会被重定向到输入验证码页面,这个问题后面再解决 1. 创建项目: 进入项目路径,使用命令 scrapy startproject a ...
分类:
其他好文 时间:
2018-02-04 19:41:35
阅读次数:
218
一、引子 1.什么是数据? x = 10,10是我们要储存的数据 2.为何数据要分不同的类型 数据是用来表示状态的,不同的状态就应该用不用的类型的数据去表示 3.数据类型 (1)数字 (2)字符串 (3)列表 (4)元组 (5)字典 (6)集合 字符串存储少量的数据,便于操作 元组里面可以放任何数据... ...
分类:
其他好文 时间:
2018-01-23 23:18:58
阅读次数:
256
情况是帮朋友调试Webapp,在Android下显示正常,用iphone查看时输入文本框发现输入的文字都空白,加入背景上仍然看不到文字。代码如下:<divclass="phone"><inputtype="number"value=""placeholder="请输入验证码"></div&
分类:
移动开发 时间:
2018-01-18 18:00:01
阅读次数:
1101
限制输入框只能输入数字,并且保留两位小数 限制输入框只能输入数字,并且保留两位小数 如果要限制上限。可以修改为,如小于100 如果保留一位小数可以 ...
分类:
其他好文 时间:
2018-01-17 01:05:14
阅读次数:
203
利用DOM进行表单验证 例:生成4个随机数当做验证码 //HTML输出程序 验证码:<div id="yzm" onClick="huanyizhang"></div><br> 请输入验证码:<input type="text" id="shuru"><br> <button onClick="yz ...
分类:
其他好文 时间:
2018-01-14 15:59:34
阅读次数:
113
回答这个问题可以从多个角度来回答,比如商务角度和技术角度,为了快速清晰的让广大的读者了解这个过程,本文我们从商务角度来深入分析。 实现原理 现各大APP发送短信的服务一般是由第三方短信服务商提供的,他们整合了移动,联通、电信三方资源,三网都可以发送,这样就不需要直接对接运营商了。 发送短信验证码主要 ...
分类:
移动开发 时间:
2018-01-12 11:18:55
阅读次数:
227
$dirty( 表单有填写记录 )$valid( 字段内容合法的 )$invalid( 字段内容是非法的 )$pristine( 表单没有填写记录 ) <!DOCTYPE html><html><script src="http://apps.bdimg.com/libs/angular.js/1. ...
分类:
Web程序 时间:
2018-01-08 12:16:48
阅读次数:
207
背景: 初来乍到的pythoner,刚开始的时候觉得所有的网站无非就是分析HTML、json数据,但是忽略了很多的一个问题,有很多的网站为了反爬虫,除了需要高可用代理IP地址池外,还需要登录。例如知乎,很多信息都是需要登录以后才能爬取,但是频繁登录后就会出现验证码(有些网站直接就让你输入验证码),这 ...
分类:
编程语言 时间:
2018-01-05 15:11:33
阅读次数:
219
在https://www.oschina.net/(开源中国)网站使用邮箱注册,登录QQ邮箱激活注册帐号: 问题一:刚开始在定位昵称、密码、验证码、性别、协议、注册元素时,提示:element not visible ,原因是由于页面上有两个结构类似的元素(用手机注册也有这些元素),因为这个定义对“ ...
分类:
其他好文 时间:
2017-12-31 21:10:08
阅读次数:
294
前言 偶然间挖了一个漏洞是密码重置,挖掘过程很有趣,可以参考下。 挖掘过程 在说明之前我们可以先走下正常流程,这样才方便查漏~ 正常流程 第一步骤: 正常填写完,点击下一步发送请求: 获得对应的响应报文: 第二步骤: 获取验证码->输入验证码-进入第三步骤: 输入验证码进入第三步骤的请求包: 第三步 ...
分类:
其他好文 时间:
2017-12-26 21:58:05
阅读次数:
197