### HtmlUnit What？ - 项目1 https://gitee.com/dgwcode/spiderTmallTradeInfo - 项目2 https://gitee.com/dgwcode/SimulationFang 这两个项目，是最新Htmlunit包下的新项目，很多东西在国内 ...
分类：
Web程序 时间：
2018-11-18 19:35:32
阅读次数：
208
一、HttpClient简介HttpClient是Apache下的子项目，很著名的另外两个项目Cactus和HTMLunit都使用了HttpClient。二、HttpClient提供的方法1、实现了所有的HTTP的方法（get、post、put、head等）2、支持自动转向3、支持HTTPS协议4、支持代理服务器等。三、基本功能1、get方法a、创建HttpClient实例b、创建某种连接方式的实
分类：
Web程序 时间：
2018-10-24 15:56:57
阅读次数：
230
jdk1.7以下应该不能用，博主1.7用此包报错。 htmlunit-2.33：https://pan.baidu.com/s/1zpSsBH1VwSHXXWZRzvsx6A jdk1.7以下建议用它： htmlUnil-2010年老款lib：https://pan.baidu.com/s/1w_s ...
分类：
编程语言 时间：
2018-09-14 16:19:40
阅读次数：
127
Exception in thread "main" java.lang.UnsupportedClassVersionError: com/gargoylesoftware/htmlunit/WebClient : Unsupported major.minor version 52.0 at j ...
分类：
Web程序 时间：
2018-09-14 16:16:57
阅读次数：
160
1.模拟登录csdn,最开始的时候使用的是httpclient,网上的所有模拟登录csdn的版本都是找到lt/execution/event_id.连同用户名及密码 一起发送即可,但是目前的csdn的登录参数可不止这三个,fkid怎么解决?我抓包时发现fkid是登录时其value才被赋值,奈何找了半 ...
分类：
Web程序 时间：
2018-08-08 21:29:35
阅读次数：
201
使用htmlunit的好处有两点,相比httpclient,htmlunit是对浏览器的模拟,比如你定位一个按钮,就可以执行click()方法,此外不需要象在httpclient中一样编写复杂的代码,如一堆request header还有一大堆请求参数,你只需要填写用户名,密码,验证码即可,就象在使 ...
分类：
Web程序 时间：
2018-08-08 19:29:27
阅读次数：
540
就像许多现代科技一样，从网站提取信息这一功能也有多个框架可以选择。最流行的有JSoup、HTMLUnit和Selenium WebDriver。我们这篇文章讨论JSoup。JSoup是个开源项目，提供强大的数据提取API。可以用它来解析给定URL、文件或字符串中的HTML。它还能操纵HTML元素和属 ...
分类：
编程语言 时间：
2018-08-05 23:25:37
阅读次数：
221
使用webcollector时出现了如下异常 分析是依赖的问题,不仅要添加selenium-java,还要添加htmlunit-driver的依赖,注意不要添加成selenium-htmlunit-driver 添加htmlunit-driver后,异常解决 ...
分类：
编程语言 时间：
2018-08-05 18:10:27
阅读次数：
536
上次学了jsoup之后，发现一些动态生成的网页内容是无法抓取的，于是又学习了htmlunit，下面是抓取酷狗音乐与qq音乐链接的例子： 酷狗音乐： 运行结果： qq音乐抓取实例： 运行结果： 相比之下，酷狗音乐相对好爬一些，QQ音乐有些繁琐。。。 ...
分类：
Web程序 时间：
2018-08-02 00:08:51
阅读次数：
242
