码迷,mamicode.com
首页 > 编程语言 > 详细

python2安装httplib2及其小爬虫实例

时间:2016-04-07 18:41:08      阅读:1058      评论:0      收藏:0      [点我收藏+]

标签:python   网络爬虫   httplib2安装   

本篇文章将教大家如何在python2中安装httplib2库,并且会通过一个小爬虫实例展示一下其功能。


  1. 首先大家可以从“https://code.google.com/p/httplib2/” 下载一款适合你的压缩包

    也可以从本篇文章的附件中直接下载lib2安装包


  2. 解压你的压缩包到任意目录中(推荐是python的安装目录里)

技术分享

3.

设置环境变量,这样就不用在命令行下给出python.exe的具体位置,具体说如下:


假设你的python安装在D:\Python目录下,设置环境变量方法如下:  


方法一、我的电脑->属性->高级->环境变量->系统变量  

在系统变量里找到PATH,双击PATH,在结尾加上 ";D:\Python"(不要引号)  

技术分享


4.dos下安装httpLib2模块

 进入httplib2-0.4.0.zip的解压目录,运行python settup.py install 进行安装

即:用快捷键ctrl+r,敲入cmd,在cmd命令行下:到你的python目录下:比如:d:Python27;

d:

cd Python26

cd 你解压的目录(该目录下有个setup.py文件)

执行:python setup.py install即可;

注:在ubuntu下使用easy_install httplib2

必须使用cd切换至相应解压目录下才可安装

技术分享


至此,httplib2库已经安装完成,接下来我们可以通过一个小爬虫测试一下。


import urllib   

import webbrowser as web  #导入webbrowser将其重命名为web

url = "http://www.163.com"  

content = urllib.urlopen(url).read()  #将163主页的全部内容(代码)读取缓存至content变量

open("licheng.html", "w").write(content)  #打开或是新建一个licheng.html文件将content写入

web.open_new_tab(‘licheng.html‘)  #用默认浏览器打开一个新标签


运行如下

技术分享

python2安装httplib2及其小爬虫实例

标签:python   网络爬虫   httplib2安装   

原文地址:http://licheng666.blog.51cto.com/10632752/1761386

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!