一 写爬虫注意事项 网络上有不少有用的资源, 如果需要合理的用爬虫去爬取资源是合法的,但是注意不要越界,前一阶段有个公司因为一个程序员写了个爬虫,导致公司200多个人被抓,所以先进入正题之前了解下什么样的爬虫是违法的: 如果爬虫程序采集到公民的姓名、身份证件号码、通信通讯联系方式、住址、账号密码、财 ...
分类:
编程语言 时间:
2019-12-21 11:56:39
阅读次数:
128
整体流程: 获得access_token 调用img.superresolution得到media_id 根据media_id下载图片 注:虽然以下的几个接口都是服务端API,但是我都是在客户端调用的,实测可行。 一、获取accecc_token 参考 auth.getAccessToken 请求地 ...
分类:
微信 时间:
2019-12-17 15:10:17
阅读次数:
219
没什么技术含量,主要留给自己查找方便; 如题,知道图片的完整网络路径的情况下,在浏览器中下载图片的实现: 下面这个方法实现的是把图片读取为byte数组: private byte[] GetImageContent(string url) { HttpWebRequest request = (Ht ...
分类:
Web程序 时间:
2019-12-13 19:39:05
阅读次数:
104
使用Picasso组件去下载图片会发现图片宽高会变形不受等比缩放控制,即使设置了图片的 scaleType,可能是对Picasso的api没有用对, Picasso.with(this.activity) .load(AppModel.GetInstance().userAvatarPath) .n ...
分类:
移动开发 时间:
2019-12-11 23:18:59
阅读次数:
226
public void download(String urlString, String filename,String savePath) throws Exception { // 构造URL URL url = new URL(urlString); // 打开连接 URLConnectio... ...
分类:
Web程序 时间:
2019-12-10 16:51:34
阅读次数:
294
http://www.iconfont.cn/ 我们引入icon都喜欢阿里的矢量图标库 阿里的图标库也是可以下载为图片的 当然下载图片不是我们想要的,我们想要的是字体 第一种方法,本地使用 首先我们选择自己想要的icon 添加入库 点击下载代码,会自动下载一个压缩文件,解压之后将文件里的所有内容转移 ...
分类:
Web程序 时间:
2019-12-07 16:09:32
阅读次数:
148
从网站上偷图偷音乐偷视频教程 因为有些地方下载图片 音乐 都要下载客户端 或者 要vip 所以避免麻烦 所以 必备工具:谷歌浏览器 1 如何偷图 随便打开个网站连接 (1)鼠标右键到图片上选择检查 (2)找图片 鼠标放上去会有图片提示的 一般在src后面 有时候也会写在css里面 右键 open n ...
分类:
Web程序 时间:
2019-11-23 09:28:11
阅读次数:
128
使用scrapy的下载模块需要PIL(python图像处理模块)的支持,使用pip安装即可 ...
分类:
其他好文 时间:
2019-11-19 14:06:03
阅读次数:
63
Socket下载一张图片 在百度搜索头像,挑一张 复制图片的路径打开,并保存这个url 把这个url的域名和路径分开 首先导入socket模块 第一步:创建套接字客户端 第二步:发起连接,connect()参数填域名和端口,http协议端口默认为80 第三步:构造报文 报文里的URL就是一开始从图片 ...
分类:
其他好文 时间:
2019-10-27 01:11:36
阅读次数:
95
Request库使用教程 相比于urllib更加简便易用的HTTP库。 Requests GET请求:只需要向 方法中传入相应的url即可以实现GET请求并获得Response。POST请求使用 方法实现代码如下: requests库中提供更简便的传入参数的方法,将一个字典形式的参数传递给param ...
分类:
其他好文 时间:
2019-10-20 22:47:56
阅读次数:
127