码迷,mamicode.com
首页 > 编程语言 > 详细

python 爬虫(七)问题

时间:2017-02-09 23:02:25      阅读:174      评论:0      收藏:0      [点我收藏+]

标签:解决方法   gecko   height   gen   logs   ref   错误   image   分享   

1. 在使用scrapy编写爬虫的时候遇到这样的错误

技术分享

解决方法:

在setting.py中添加:

USER_AGENT = ‘Mozilla/5.0 (Windows NT 6.1; WOW64; rv:41.0) Gecko/20100101 Firefox/41.0‘

但是我添加

User_Agent = ‘Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:51.0) Gecko/20100101 Firefox/51.0‘ 没有解决问题。
原因:还未知

python 爬虫(七)问题

标签:解决方法   gecko   height   gen   logs   ref   错误   image   分享   

原文地址:http://www.cnblogs.com/someoneHan/p/6384040.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!