标签：统一 csdn google 安全 blank 异步 开发者 magic 网站
参考：http://blog.csdn.net/wgyscsf/article/details/53454910
第一种解决方案是采用一些第三方的工具，模拟浏览器的行为，去加载数据。比如：Selenium、PhantomJs。
Selenium，每次我们都需要去启动一个浏览器进程；配置繁琐，不同的浏览器需要下载不同的驱动以及jar包，并且驱动和jar包之间有严格版本匹配关系，如果不匹配就不能使用（至少本人因为版本匹配的关系，花了很大的时间）。第二种解决方案是分析页面，找到对应请求接口，直接获取数据。
谷歌和驱动版本匹配可以参考这篇文章：http://blog.csdn.net/huilan_same/article/details/51896672
chromedriver下载地址（不需要FQ）：http://chromedriver.storage.googleapis.com/index.html
将下载的驱动放到谷歌浏览器的安装目录下，如下图
package Test; import org.openqa.selenium.WebDriver; import org.openqa.selenium.chrome.ChromeDriver; public class SeleniumTest { public static void main(String[] args) { // 第一步： 设置chromedriver地址。一定要指定驱动的位置。 System.setProperty("webdriver.chrome.driver", "C:\\Program Files (x86)\\Google\\Chrome\\Application\\chromedriver.exe"); // 第二步：初始化驱动 WebDriver driver = new ChromeDriver(); // 第三步：获取目标网页 driver.get("http://blog.csdn.net/wgyscsf/article/details/52835845"); // 第四步：解析。以下就可以进行解了。使用webMagic、jsoup等进行必要的解析。 System.out.println("Page title is: " + driver.getTitle()); //System.out.println("Page title is: " + driver.getPageSource()); } }
标签：统一 csdn google 安全 blank 异步 开发者 magic 网站
原文地址：http://www.cnblogs.com/Michael2397/p/7823363.html
