码迷,mamicode.com
首页 > 其他好文 > 详细

Scrapy爬虫requests

时间:2017-06-23 00:43:39      阅读:165      评论:0      收藏:0      [点我收藏+]

标签:模拟   服务   scrapy   网站   一个   color   屏幕   打开   登陆   

requests 模块

模块的由来: 浏览器可以浏览网站, 是由于浏览器发送了requests , 各种请求.打开一个网站可能有几十到几百个请求.

从而服务器端会反馈各种因应不同请求生成的数据. 我们浏览器再decode这些数据来显示在屏幕上.

 

requests, 就是Python一种用来伪装成模拟器的模块. 对对方的服务器作出各种请求, 从而得到我们所需要的数据.

从而, request可以实现和浏览器的各种互动, 比如伪装登陆, 爬虫数据.

Scrapy爬虫requests

标签:模拟   服务   scrapy   网站   一个   color   屏幕   打开   登陆   

原文地址:http://www.cnblogs.com/billvvv/p/7067836.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!