码迷,mamicode.com
首页 > 编程语言 > 详细

python爬虫 selenium+phantomjs动态解析网页,加载页面成功,返回空数据

时间:2017-07-04 20:03:58      阅读:609      评论:0      收藏:0      [点我收藏+]

标签:png   自己   网页   头部   动态加载   设置   技术   电脑   image   

废话不多说,直接说重点:

刚开始做的时候,代理IP,头部信息池,都已经做好了,使用selenium+phantomjs获取js动态加载后的源码

起初挺好的,能出来动态加载后的源码,但是运行了几次之后,电脑有点卡顿(估计是运存太小),源码就获取不到了,返回的数据

都是空数据,以至于都是出错

在做的时候一定要给页面加载之前做一个延时,以保证页面的正常加载出来,这样我们才能获取导数据技术分享

我在加载前后都做了延时等待,当然,我这个就是说这个意思,没必要仿照

可以根据自己的需求进行设置,然后源码就加载出来了,就是有点慢!

python爬虫 selenium+phantomjs动态解析网页,加载页面成功,返回空数据

标签:png   自己   网页   头部   动态加载   设置   技术   电脑   image   

原文地址:http://www.cnblogs.com/feifang/p/7118002.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!