动态页面简介--Selenium与PhantomJS简介--Selenium的简单使用 ...
分类：
Web程序 时间：
2018-07-11 19:47:39
阅读次数：
247
requests+bs4+lxml直接获取并解析html数据抓包ajax请求，使用requests获取并解析json数据反爬严重的网站，使用selenium爬取设置代理????a.urllib/requests/selenium+chrome/selenium+phantomjs设置代理????b.爬取免费代理网站中的
分类：
编程语言 时间：
2018-07-06 18:31:31
阅读次数：
230
javaselenium搭建×××面浏览器1.http://phantomjs.org/下载windows版phantomjs2.解压后bin目录下会有exe文件3.测试代码：复制代码packagese;importorg.openqa.selenium.WebDriver;importorg.openqa.selenium.firefox.FirefoxDriver;importorg.openq
分类：
编程语言 时间：
2018-07-05 00:35:38
阅读次数：
145
#coding=utf-8from selenium import webdriverdef crawMovie(): driver=webdriver.PhantomJS() driver.get("https://movie.douban.com/") movie_list=[] more_bt ...
分类：
编程语言 时间：
2018-07-01 16:54:32
阅读次数：
161
目前网站主流的加载方式： 一种是同步加载；另一种是异步加载，也即我们常说的用ajax。对于同步加载的网站，普通的爬虫程序轻松就能搞定。但是对于那种异步请求数据的网站，通常使用selenium+PhantomJS组合来完成。 （1）selenium:是一个web自动化测试工具，最初是为网站自动化测试而 ...
分类：
Web程序 时间：
2018-07-01 16:21:33
阅读次数：
266
使用selenium+PhantomJS爬取拉钩网职位信息，保存在csv文件至本地磁盘 拉钩网的职位页面，点击下一页，职位信息加载，但是浏览器的url的不变，说明数据不是发送get请求得到的。 我们不去寻找它的API。这里使用另一种方式：使用PhantomJS模拟浏览，通过单击页面获取下一页。 这里 ...
分类：
Web程序 时间：
2018-06-24 21:10:11
阅读次数：
219
公司最近有个需求：把用户第一次的测量身体信息和最近一次测量信息进行对比，并且需要把对比的数据截成图片可以发给用户（需要在不打开网页的情况下实时对网页进行截图然后保存到服务器上，返回图片地址），通过网上的一些文章可以发现有以下几种实现方式：参考文章https://blog.csdn.net/wangl ...
分类：
编程语言 时间：
2018-06-23 11:42:20
阅读次数：
585
使用PhantomJS在服务器端渲染echarts图片
分类：
Web程序 时间：
2018-06-18 17:07:37
阅读次数：
958
原因：Selenuim已经放弃PhantomJS3.x了，建议使用火狐或者谷歌无头浏览器。 解决方法： 1.phantomjs降级，换个2.x版本的 2.使用无头浏览器，示例代码（自己改了改，如有错误还望指正） 运行结果 为了紧跟时代，还是使用无头浏览器吧 ...
分类：
Web程序 时间：
2018-06-06 18:12:26
阅读次数：
645
1.先下载phantomjs并解压2.将phantomjs的bin目录配置到环境变量中3.测试phantomjs，cmd下输入phantomjs进入 （按 Ctrl + c 组 合键退出和 phantom.exit()；退出命令行了） 4.PhantomJS的使用 网址1：http://javasc ...
分类：
Web程序 时间：
2018-06-05 21:12:26
阅读次数：
187
