码迷,mamicode.com
首页 > 编程语言 > 详细

[python][爬虫]暴漫gif下载

时间:2015-04-23 13:18:49      阅读:228      评论:0      收藏:0      [点我收藏+]

标签:python   爬虫   

说明:和上一个下载百度贴吧图片差不多,修改了正则,加入了页码控制;
此外也加入了输出格式控制,如果想加入手动设定存储路径功能,可以参考之前的百度贴吧爬虫


#!/usr/bin/env python
#! -*- coding: utf-8 -*-
#图片地址样例:src="http://ww2.sinaimg.cn/large/005Yan1vjw1erf95qkbfog307e08uu0y.gif" style="width:460px"
import urllib,urllib2
import re
#返回网页源代码
def getHtml(url, page):
    tempUrl = url + str(page)
    print tempUrl
    html = urllib2.urlopen(tempUrl)
    srcCode = html.read()
    return srcCode

def getImg(url, start_page, end_page):
    #对网页中图片建立正则
    pattern = re.compile(r‘src="(.*?\.gif)".*?style="width:460px"‘)
    for x in xrange(start_page, end_page+1):
        srcCode = getHtml(url,x)
        #图片完整路径存储为list
        imgSrc = pattern.findall(srcCode)
        num = 0
        for i in imgSrc:
            urllib.urlretrieve(i,‘P%s0%s.gif‘ %(x ,num))
            num += 1
            print "正则下载"
            print i
    print ‘全部任务完成!‘


#----------- 程序的入口处 -----------
print u"""
程序开始运行
#=========================================================
#   程序:暴漫爬虫
#   版本:V0.1
#   作者:江前云后
#   语言:Python 2.7
#   操作:输入要下载的暴漫gif的页码范围,自动下载所有gif图
#=========================================================
"""
#测试url
myUrl = ‘http://baozoumanhua.com/gif/hot/page/‘
start_page = int(raw_input(u"输入起始页\n"))
end_page = int(raw_input(u"输入结束页\n"))
getImg(myUrl, start_page, end_page)

[python][爬虫]暴漫gif下载

标签:python   爬虫   

原文地址:http://blog.csdn.net/songyu0120/article/details/45219959

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!