分析 分析网站寻找需要的网址 用谷歌浏览器摁F12打开开发者工具，然后打开斗鱼颜值分类的页面，如图： 在里面的请求中，最后发现它是以ajax加载的数据，数据格式为json，如图： 圈住的部分是我们需要的数据，然后复制它的网址为https://www.douyu.com/gapi/rknc/direc ...
分类：
编程语言 时间：
2019-08-26 18:03:32
阅读次数：
105
#今日目标 **scrapy之360图片爬取** 今天要爬取的是360美女图片，首先分析页面得知网页是动态加载，故需要先找到网页链接规律， 然后调用ImagesPipeline类实现图片爬取 *代码实现* so.py ``` # -*- coding: utf-8 -*- import scrapy... ...
分类：
其他好文 时间：
2019-08-04 21:16:05
阅读次数：
126
前言: 有一段时间没写博客了, "持之以恒"徽章都暗了, 实在不该。 前一段确实比較忙, ...小小地给自己的懒找个借口吧。 大二即将结束, 学习iOS也有一段时间了。今天抽点时间, 开源一个前几天刚上传的App里面的一个功能, RT, 美女图片採集器。 美女.. 相信没有人不喜欢吧, 基于此, 这 ...
分类：
其他好文 时间：
2019-05-01 16:10:08
阅读次数：
221
1 import requests 2 from bs4 import BeautifulSoup 3 from urllib import request 4 # import threading 5 import gevent 6 from gevent import monkey 7 8 mo... ...
分类：
编程语言 时间：
2019-02-12 13:10:43
阅读次数：
301
? 推荐下我自己创建的Python学习交流群923414804，这是Python学习交流的地方，不管你是小白还是大牛，小编都欢迎，不定期分享干货，包括我整理的一份适合零基础学习Python的资料和入门教程。 笔者是头条的深度使用者，经常用头条完成“看片”大业。若不信的话可以试试在头条搜索街拍，返回的 ...
分类：
编程语言 时间：
2019-01-19 13:51:14
阅读次数：
505
dedecms红黑配风格美女图片站是采用dedecms程序搭建的图片网站源码，网站感觉很大气，简约但是不简单，适合做图片网站。网站模板是收集其他网站的模板，感谢原网站提供者。在安装过程中出现问题，现已测试完整修改错误，兼容主流浏览器。 dedecms织梦图片模板源码下载地址链接http://www. ...
分类：
其他好文 时间：
2018-12-10 22:00:12
阅读次数：
181
Xpath最初用来处理XML解析，同样适用于HTML文档处理。相比正则表达式更方便一些 Xpath基本规则 下面举例使用下 result.decode(‘utf-8’) 可以补全缺失的html格式字符串html.xpath(‘//*’)查找根节点下所有子孙节点html.xpath(‘//a[@cla ...
分类：
编程语言 时间：
2018-11-18 22:38:26
阅读次数：
325
效果图： 原始的美女图片上盖了一层的颜色，这个是想出来的效果，只是用来实践学到的技能，具体的场景还没有确定。 1/首先打开原始的美女图片： 2/然后在添加一张新的图片，作为新的图层添加进来： 这样的话，美女图片被挡住了，然后设置mode： 选择Dissolve模式，Opacity根据自己感觉来调整到 ...
分类：
其他好文 时间：
2018-09-05 19:49:15
阅读次数：
121
我们的学习爬虫的动力是什么？有人可能会说：如果我学好了，我可以找一个高薪的工作。有人可能会说：我学习编程希望能够为社会做贡献（手动滑稽）有人可能会说：为了妹子！.....其实我们会发现妹子才是第一生产力呀！今天咱们就是爬取今日头条，你要问我为什么要爬取今日头条？是因为爱嘛？是因为责任嘛？不，是因为头条里面的有很多美女图片，然后我们可以把她们都爬取下来！！！是不是想想都觉得很兴奋，是不是都要流鼻血了
分类：
编程语言 时间：
2018-08-08 16:10:24
阅读次数：
161
如果爬虫需要展现速度，我觉得就是去下载图片吧，原本是想选择去煎蛋那里下载图片的，那里的美女图片都是高质量的，我稿子都是差不多写好了的，无奈今天重新看下，妹子图的入口给关了。 至于为什么关呢，大家可以去看看XXX日报的关停原因吧或者百度下，这里就不多说了，这次我选择了去下载无版权高清图片，因为做自媒体 ...
分类：
编程语言 时间：
2018-07-18 21:37:44
阅读次数：
211
