思路如下： 首先找到图片的节点 找到爬取页面的urlhttps://www.qiushibaike.com/imgrank/ 发起请求拿到响应,略 使用正则表达式来获取图片的srcre.compile('.*?".*?', re.S) 最后持久化写入文件。 具体代码如下：import request... ...
分类：
其他好文 时间：
2019-04-05 12:34:26
阅读次数：
181
基于Docker Compose进行服务编排时，一定碰到服务启动顺序的问题，例如：B服务启动之前，A服务要已经启动并且可以正常对外服务。 这个启动顺序的问题，Docker Compose本身它是无法解决的，即使定义了depends_on或者links，它只能保证该服务依赖这些服务，启动本服务时会将依 ...
分类：
其他好文 时间：
2019-03-25 14:59:42
阅读次数：
221
2019liunx三周目总结——find按层搜素-maxdepthlevel搜索目录最大深度-mindepthlevel搜素目录最小深度按文件名-name‘名’，支持glob*？[][^]-iname"名"，不区分字母大小写-inumn按inode号查找-samefilename相同inode号的文件-linksn链接数为n的文件-regex“PATTERN”：以PATTERN匹配整个文件路径，而
分类：
其他好文 时间：
2019-03-23 00:59:09
阅读次数：
183
百度经验（me'i经过测试） 首先申请免费的ssl证书，很多地方都可以申请。我是在腾讯云！如图 下载证书备份好。以免丢失。解压下载的证书，里面有4个文件夹相对应不同的安装环境，我们用的是Apache，所以选择这个。如图 2、开启php_openssl扩展 修改httpd.conf配置文件， #Loa ...
分类：
Web程序 时间：
2019-03-14 01:00:33
阅读次数：
755
import java.io.IOException; import java.nio.ByteBuffer; import java.nio.channels.FileChannel; import java.nio.channels.SeekableByteChannel; import jav... ...
分类：
其他好文 时间：
2019-03-05 14:09:48
阅读次数：
196
目录管理类的命令 mkdir，rmdir mkdir：创建目录 -p：自动按需创建父目录 -v：显示详细过程 -m：直接给定权限 mkdir /tmp/{a,b}_{c,d} >创建 /tmp/a/c， /tmp/a/d，/tmp/b/c，/tmp/b/d四个目录 rmdir：删除空目录 文件查看命 ...
分类：
其他好文 时间：
2019-03-02 00:50:11
阅读次数：
239
在使用阿里云服务器，搭建阿里云VPC专有网络之后，关闭不必要的端口，并进行验证。 端口摘要： 端口扫描器是一种检测服务器或主机虚拟端口是开启或关闭的工具。端口允许同一台计算机上的不同应用程序同时共享网络资源。连接本地局域网或互联网的计算机运行着许多不同服务,它们监听着常用或不常用的端口。端口数的范围 ...
分类：
其他好文 时间：
2019-03-01 10:53:02
阅读次数：
919
rules = ( Rule(LinkExtractor(allow=r'/films/\d+'),process_links='deal_links' ,callback='parse_maoyan',follow=False), ) def deal_links(self,links): for... ...
分类：
其他好文 时间：
2019-02-19 15:02:42
阅读次数：
191
Critical Links 题目链接：https://vjudge.net/problem/UVA-796 Description: In a computer network a link L, which interconnects two servers, is considered cri ...
分类：
其他好文 时间：
2019-02-17 23:52:42
阅读次数：
284
[TOC] 1.目标 爬取每个页面链接的内部内容和投诉信息 2.方法1：通过Spider爬取 python coding: utf 8 import scrapy from dongguanSpider.items import DongguanItem class SunSpider(scrapy ...
分类：
其他好文 时间：
2019-02-15 22:31:45
阅读次数：
249
