溜达豆瓣的时候,发现一些图片,懒得一个一个扒,之前写过c#和python版本的图片下载,因此拿之前的Python代码来改了改,折腾出一个豆瓣版本,方便各位使用 # -*- coding:utf8 -*- import urllib2, urllib, socket import re import ...
分类:
编程语言 时间:
2016-10-07 11:15:36
阅读次数:
215
经常遇到选择多个文件进行批量下载的情况,可以先将选择的所有的文件生成一个zip文件,然后再下载,该zip文件,即可实现批量下载,但是在打包过程中,常常也会出现下载过来的zip文件中里面有乱码的文件名,通过使用ant.jar中的org.apache.tools.zip里的ZipOutPutStream ...
分类:
编程语言 时间:
2016-09-27 17:35:52
阅读次数:
259
Node的便民技巧-- 压缩代码 下载图片 压缩代码 相信很多前端的同学都会在上线前压缩JS代码,现在的Gulp Webpack Grunt......都能轻松实现。但问题来了,这些都不会,难道就要面对几十个JS文件一遍遍来回“复制-压缩-创建-粘贴”,这样太不人性化了。 于是可以借助Node + ...
分类:
Web程序 时间:
2016-08-23 23:27:29
阅读次数:
303
微博上经常有同学分享一些公开课资源,包括可下载的网盘资源,课件资源等等,但是时间长了就忘了在哪里了。另外Coursera官方也推荐一些第三方批量下载工具,大家下载课程后也可以考虑共享到网盘里,减轻Coursera官方的下载压力。这里计划做一个汇总,包括一些佚名的来自网络上的课程资源分享,也欢迎大家提 ...
分类:
其他好文 时间:
2016-06-15 10:44:05
阅读次数:
775
#!/usr/bin/python3# -*- encoding:utf-8 -*-# 网易云音乐批量下载import requestsimport urllib# 榜单歌曲批量下载# r = requests.get('http://music.163.com/api/playlist/detai ...
分类:
编程语言 时间:
2016-06-07 12:42:25
阅读次数:
708
public class UploadFile { //设置好账号的ACCESS_KEY和SECRET_KEY String ACCESS_KEY = "akey"; String SECRET_KEY = "skey"; //要上传的空间 String bucketname = "bucketna ...
分类:
其他好文 时间:
2016-06-03 09:55:14
阅读次数:
527
在很多场景中我们需要通过并行化的方式来提高程序运行的速度,比较典型的需求就是并行下载。前期遇到一个需求是要批量下载瓦片,每次大概下载上百万个瓦片,要想提高瓦片的下载速度,只能通过并行化的方式,下面把我解决此问题的思路和代码总结如下: 第一步确定线程个数(ThreadCount),这个要根据网络情况和 ...
分类:
其他好文 时间:
2016-05-30 00:40:40
阅读次数:
261
转载:http://www.omicshare.com/forum/thread-151-1-3219.html(出处: OmicShare Forum) 1. 准备工作 2. 进入NCBI的Batch Entrez 3. 检索 4. 检查 5. 下载 ...
分类:
其他好文 时间:
2016-05-22 23:10:09
阅读次数:
162
百度音乐不需要登录也可以下载?听到这个消息是不是很兴奋呢,
接下来我们打开百度音乐,随便打开一首歌,切换到百度播放页面:如图
我这里用的是Firfox 浏览器,打开firebug 先清空所有的请求,如图:
现在我们重新刷新下页面,看到这个.mp3的地址就是百度音乐的地址,我们可以直接复制到迅雷里下载,但是这种做法太初级了吧,如果有很多首歌曲呢,每个都这样复制,岂不是很麻烦啊。,接下来...
分类:
编程语言 时间:
2016-05-07 09:10:47
阅读次数:
211
环境:windows 7 64位;python2.7;IDE pycharm2016.1 功能: 批量下载百度贴吧某吧某页的所有帖子中的所有图片 使用方法: 1.安装python2.7,安装re模块,安装urllib2模块 2.复制以下源代码保存为tbImgiDownloader.py文件 3.打开 ...
分类:
编程语言 时间:
2016-04-03 15:47:48
阅读次数:
156