注：文章原文为Dr. Charles Severance 的 《Python for Informatics》。文中代码用3.4版改写，并在本机测试通过。 12.5 HTML分析和网页抓取 urllib库一项最常用的功能是抓取网页。就是我们编写一个程序，将自己伪装成网页浏览器，在获取网页之后，再以查 ...
分类：
编程语言 时间：
2016-04-24 21:56:55
阅读次数：
273
前几天做了一个Java的新浪通行证模拟登录测试。现在给大家一个php的新浪通行证、微博登录的示例：具体都有备注，大家阅读代码吧.
<?php
/**
* tom 2016年4月12日10:37:08 模拟微博登录
*/
class login_weibo {
// 微博用户名称密码
private $username = '';
private $password = '';
//请...
分类：
Web程序 时间：
2016-04-14 12:20:30
阅读次数：
300
python系列均基于python3.4环境 基本概念 html.parser的核心是HTMLParser类。工作的流程是：当你feed给它一个类似HTML格式的字符串时，它会调用goahead方法向前迭代各个标签，并调用对应的parse_xxxx方法提取start_tag,tag,data,com ...
分类：
编程语言 时间：
2016-03-31 14:31:43
阅读次数：
338
大致思路：通过流的形式把网页抓取下来，然后对webView进行设置。 1.对webView进行设置 2.抓取网页数据： 用法： 解决乱码问题： 设置webView和scrollView一起滚动： ...
分类：
Web程序 时间：
2016-03-26 10:55:13
阅读次数：
218
1. Beautiful Soup的简介 简单来说，Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据。官方解释如下： Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的
分类：
编程语言 时间：
2016-03-02 09:34:44
阅读次数：
190
一、抓取远程图片到本地,你会用什么函数? 方法1：利用readfile读取远程图片到缓冲中，然后写入新的文件 function grabImage($url, $filename = '') { if($url == '') { return false; //如果 $url 为空则返回 false
分类：
Web程序 时间：
2016-02-20 00:41:58
阅读次数：
206
2016年一月，刚做完三个课程设计，C++网络版打地鼠，北山超市收银系统J2EE，JAVA聊天程序，累不堪言，置身奋斗之年承受这些是应该的，毕竟自己的技术还太菜了，没有一个开发者应有的底气。 -------------------------------------- 前记 在此之际，一同事介绍了一
分类：
Web程序 时间：
2016-01-30 01:48:21
阅读次数：
293
使用wget工具抓取网页和图片 发表于1年前(2014-12-17 11:29) 阅读（2471） | 评论（14） 85人收藏此文章, 我要收藏 赞7 wget 网页抓取 图片抓取 目录[-] 奇怪的需求 wget概述 wget尝试 wget正解 奇怪的需求 公司需要将服务器的网页缓存到路由器，用
分类：
Web程序 时间：
2016-01-28 17:01:25
阅读次数：
294
该类有以下特性：支持链式(Fluent API)操作;能够自动处理Cookie(支持所有链接自动共享Cookies,支持按域名自动发送Cookie,支持301/302跳转Cookie自动截取);支持HTTPS协议;支持证书;支持代理;支持Session会话保持;支持JSON/XML请求;支持JSON...
分类：
Web程序 时间：
2016-01-14 13:55:55
阅读次数：
141
这个列表包含与网页抓取和数据处理的Python库网络通用urllib-网络库(stdlib)。requests-网络库。grab-网络库（基于pycurl）。pycurl-网络库（绑定libcurl）。urllib3-Python HTTP库，安全连接池、支持文件post、可用性高。httplib2...
分类：
编程语言 时间：
2016-01-07 22:46:35
阅读次数：
459
