码迷,mamicode.com
首页 > 编程语言 > 详细

20170717_python爬虫之requests+cookie模拟登陆

时间:2017-07-17 11:45:23      阅读:178      评论:0      收藏:0      [点我收藏+]

标签:完全   use   uri   工具   ref   mon   pen   网站   com   

在成功登陆之前,失败了十几次。完全找不到是什么原因导致被网站判断cookie是无效的。
直到用了firefox的httpfox之后才发现cookie里还有一个ASP.NET_SessionId 这个字段!!!.net网站应该都有这个字段,php网站的是phpsession
刚开始是用的alert(document.cookie)来获取cookie的,这是个大坑!!!以后要用专业工具~~~
#-*-coding:utf-8-*- #编码声明
import requests

cookie = {}

cookies = ‘xxx=xxx;yyy=yyy‘#cookie大概是这么一个格式

for line in cookies.split(‘;‘):
key,value = line.split("=", 1)
cookie[key] = value #格式化操作,装载cookies

url = ‘http://xxx.com/user/allmessage.html‘
#重点来了!用requests,装载cookies,请求网站
res = requests.get(url,cookies=cookie)
content = res.content

f = open("h.txt",‘wb‘)#保存下来看看是否登录成功
f.write(content)
f.close()

20170717_python爬虫之requests+cookie模拟登陆

标签:完全   use   uri   工具   ref   mon   pen   网站   com   

原文地址:http://www.cnblogs.com/tiantian123/p/7193482.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!