一. Requests模块 1. 简述爬虫的概念 2. 爬虫有几种分类,在使用场景中 主要有两种: 在编写爬虫时先下载到本地进行测试,然后再进行正规的验证 3. 简述robots协议的概念也作用 4. 什么是反爬机制和反反爬机制 (1)U-A校验模式 当你在家用浏览器上网的时候,每次发送请求时请求头 ...
分类:
其他好文 时间:
2018-12-12 17:37:30
阅读次数:
406
1、直接使用get请求方式进行下载: 2、使用form 表单post请求进行下载: 3、axios(ajax)前端根据返回数据流生成文件下载: ...
分类:
其他好文 时间:
2018-12-12 13:25:07
阅读次数:
1248
C++:C语言实现HTTP的GET和POST请求 阅读目录 HTTP请求和IP/TCP 实现GET请求 实现POST请求: 参考: 回到顶部 HTTP请求和IP/TCP 所谓的HTTP协议是基于IP/TCP协议的, 所以要获取远端的html数据只要创建socket对象就足够了; HTTP是基于IP/ ...
分类:
编程语言 时间:
2018-12-11 13:48:32
阅读次数:
378
Agax局部异步刷新全称ASynchronous JavaScript And XML.使用Javascript代码获取服务器的数据,Ajax当中有两个请求方法,一个是get方法,一个是post请求方法。 ①get请求方法:请求参数在URL的后面,多个参数之间用&连接。 ②post请求方法:请求参在 ...
分类:
其他好文 时间:
2018-12-08 23:52:44
阅读次数:
183
请求对象 视图函数中request中的常用参数 视图响应对象 HttpResponse() 传入的参数是一个字符串 render() render接收三个参数 request:请求信息需要传进去 模板文件(.html文件) 模板语法(可选参数),将模板语法中的参数嵌入都模板文件中,然后发送给客户端( ...
分类:
其他好文 时间:
2018-12-08 22:28:08
阅读次数:
194
接上篇 实时获取淘宝天猫商品的评价晒单数据,这里则是基于订单的物流单号,调用接口获取物流进度,接口信息: 请求地址:https://taoapi.ndxiu.com/service/get_logis.php 请求方式:get 请求示例:{id:'物流单号',appkey:'专属appkey',si ...
分类:
其他好文 时间:
2018-12-08 11:15:34
阅读次数:
681
@PathVariable 1:接受参数时,地址栏为:/{args1}/{args2} 2:用法:(@PathVariable(value = "args")Long id) 3:GET请求方法 @RequestBody 1:接受参数时,地址栏为:/?=args1&?=args2 2:用法:(@Re ...
分类:
其他好文 时间:
2018-12-07 21:02:44
阅读次数:
430
!!!!! !!!!! 记住这个图 !!!!! 上篇博客说道DRF序列化组件的get,只是简单的举一个实例,然而在现实生活中我们前后端进行交互的时候更多的用到了Json数据格式,这也就是说前后端交互的时候用到的更多序列化,但同时也会有大量的重复性的代码,举个简单的例子,就上片博客 get请求的时候, ...
分类:
其他好文 时间:
2018-12-07 18:29:06
阅读次数:
275
知识点预习1.表单2.元素类型3.浮动4.定位01-表单form标签表单用来提交数据action要提交的网址,默认是当前网页method请求提交方式默认get请求post请求切换请求方式时注意缓存问题label标签for属性如果设置的值和input标签中设置的id属性值一样就可以实现点击label让对应的input成为焦点输入框的两个常用属性:placeholder占位提示文字outline:no
分类:
编程语言 时间:
2018-12-05 18:29:48
阅读次数:
187
昨晚同事说之前给的接口不能get方式的,直接在ie浏览器访问返回404,说明是参数有问题。 同样的接口使用curl和postman请求都正常,其他ie之外的浏览器也都正常响应。 记录下排查过程: 问题1:url少写了/ 这个/在开发中也是经常被遗忘,报出slash什么什么,看到这个单词就找url问题 ...
分类:
Web程序 时间:
2018-12-05 16:20:15
阅读次数:
717