直接附上代码，copy直接运行 package?com.sh.Browser;
import?java.io.BufferedReader;
import?java.io.FileOutputStream;
import?java.io.IOException;
import?java.io.InputStream;
import?java.io.Inp...
分类：
编程语言 时间：
2014-11-06 11:12:46
阅读次数：
166
在做抓取前，记得把php.ini中的max_execution_time设置的大点，不然会报错的。一、用Snoopy.class.php抓取页面 一个挺萌的类名。功能也很强大，用来模拟浏览器的功能，可以获取网页内容，发送表单等。 1）我现在要抓取一个网站的列表页的内容，我要抓取的是全国的医院信息.....
分类：
Web程序 时间：
2014-10-28 11:55:27
阅读次数：
249
一、什么是WebClient类1、基本知识 WebClient类是Mircsoft在.NET框架下提供的向 URI 标识的资源发送数据和从 URI 标识的资源接收数据的公共方法。通过这个类，大家可以在脱离浏览器的基础上模拟浏览器对互联网上的资源的访问和发送信息。它使人们使用起来更加简单方便，然而它也...
分类：
Web程序 时间：
2014-10-22 06:21:00
阅读次数：
208
项目开发中难免遇到外部接口的调用,小生今天初次接触该类,跟着API方法走了一遍,如有不对的地方,还请哆哆指正,拜谢! 1 package com.cplatform.movie.back.test; 2 3 import java.io.BufferedReader; 4 import j...
分类：
编程语言 时间：
2014-10-21 21:24:13
阅读次数：
280
因为测试跑流程要蛋疼的一直发标，so写了这个发标脚本。代码不短，但是实现很简单，直接模拟浏览器操作就行了。期间出现了一个小问题，就是第二页部分内容填不上去，研究了下，发现在执行填充语句时，dom还没加载出来，相当于display还是none的状态，然后加了个判断解决了。效果图如下： 1 // ...
分类：
其他好文 时间：
2014-10-21 17:38:01
阅读次数：
211
python下读取一个页面的数据可以通过urllib2轻松实现请求import urllib2print urllib2.urlopen('http://www.baidu.com').read()涉及到页面的POST请求操作的话需要提供头信息，提交的post数据和请求页面。其中的post数据需要u...
分类：
编程语言 时间：
2014-10-05 05:27:27
阅读次数：
201
PHP 利用 Curl Functions 可以完成各种传送文件操作，比如模拟浏览器发送GET，POST请求等等，受限于php语言本身不支持多线程，所以开发爬虫程序效率并不高，这时候往往需 要借助Curl Multi Functions 它可以实现并发多线程的访问多个url地址。既然 Curl Mu...
分类：
编程语言 时间：
2014-09-25 19:37:17
阅读次数：
150
Jakarta的httpclient3.1是最新版本，项目中需要用程序模拟浏览器的GET和POST动作。在使用过程中遇到不少问题。1. 带附件的POST提交 最开始都是使用MultipartPostMethod这个类，现在已经废弃这个类了。API说明：Deprecated.Use Multipart...
分类：
其他好文 时间：
2014-09-24 20:18:07
阅读次数：
208
python真是一门非常优秀的语言，非常适合初学者，也非常适合写一些原型程序。这篇文章总结了下以前做的各种和网络相关的东西：自动登录、提取信息、模拟点击、模拟上传、取号等等，多亏了python才使世界变得那么美好！ 本次我们主要是模拟浏览器下载网页，学会了下载网页其他的下载图片什么的都是一样的套路。...
分类：
编程语言 时间：
2014-09-16 21:48:21
阅读次数：
310
写的匆忙，示意一下，有待完善。把以下代码复制到文本文件中，把文件扩展名改为.html就可以运行了。 1待搜索的文本。 2待搜索的文本。 ...
分类：
其他好文 时间：
2014-09-14 16:35:07
阅读次数：
266
