标签:tom 访问 cookies ant 网站 scrapy 运行 driver 解决方法
1. 针对需要带cookies访问的网站
scrapy.Request() 设置cookies
设置phantomjs后运行爬虫
还是依然会别ban
==========> 解决方法是在 phantomjs中设置cookies
driver.add_cookies(cookies)
标签:tom 访问 cookies ant 网站 scrapy 运行 driver 解决方法
原文地址:http://www.cnblogs.com/liyugeng/p/7890998.html