玩爬虫,怎么能少了scrapy框架呢。scrapy框架被称为是复杂并好用的爬虫框架。 当初学框架的时候是一头雾水,一旦实战成功过后,感觉瞬间打通了任督二脉,很有成就感。 接下来,将对scrapy框架爬虫代码编写流程做简要说明: 目录 一、新建工程 二、新建spider 三、定义所需爬取字段 四、解析 ...
分类:
其他好文 时间:
2020-05-29 22:58:57
阅读次数:
175
本k8s集群参考了 Michael 的 https://gitee.com/pa/kubernetes-ha-kubeadm-private 这个项目,再此表示感谢! Michael的项目k8s版本为1.14.0,笔者基于他的项目进行改进,填了不少坑,搭建了 kubernetes 1.18.2高可用 ...
分类:
Web程序 时间:
2020-05-28 23:23:43
阅读次数:
144
要使用npm命令需要先安装nodejs。安装方法网上有很多,在此就不一一例举了。 1. 安装Gulp > npm install -g gulp 首先需要在全局范围安装gulp 用git下载Uikit。 这需要安装git,进http://github.com/uikit/uikit直接下载后解压就可 ...
分类:
其他好文 时间:
2020-05-25 23:38:31
阅读次数:
86
常用命令短语 查看已安装的镜像 docker images 查看已运行的容器 docker ps 查看容器属性(DB001为容器名称) docker inspect db001 查看容器日志 docker logs tomcat07 进入容器 docker exec -it 0033e6d00a98 ...
分类:
系统相关 时间:
2020-05-25 15:51:09
阅读次数:
118
前言# 在功能、接口测试中常常需要通过数据库的操作,来准备数据、检测环境及核对功能、接口的数据库操作是否正确。在自动化测试中,就需要我们用代码连接数据库自动完成数据准备、环境检查及数据库断言的功能。使用Python操作MySQL数据库这里我们需要用到三方库PyMySQl 安装方法:pip insta ...
分类:
数据库 时间:
2020-05-25 12:12:17
阅读次数:
95
昨天发了一篇关于python批量将word03版本的.doc格式文档转成.docx的文章:word批量doc转docx格式-python。今天我们继续说一下使用python将word内容转换成html文件。下面一起来看一下。Python实现word批量转HTML-附工具python准备工作使用python类库PyDocX,安装方法(使用pip进行安装),命令如下:pipinstallpython-
分类:
编程语言 时间:
2020-05-25 10:55:09
阅读次数:
101
非原创 转自 https://blog.csdn.net/u012236579/article/details/92789273 Python下想安装tar.gz和tar.bz2格式的: 用conda install 的安装方式,不要用pip install.conda install --offl... ...
以前我只知道eclipse提供的一个图形界面的方法,添加插件的方式很简单 今天百度了一下借鉴他人的文章发现两种也是很简单的方式 其中第二种几年前用过,但是后来没有使用就给忘记了 下面开始: Eclipse插件的安装方法大体可以分为三种:直接复制、使用link文件,以及使用eclipse自带的图形界面 ...
分类:
系统相关 时间:
2020-05-21 13:26:57
阅读次数:
55
1.kubernetes集群部署1.1kubernetes安装概述要学习kubernetes,首先需要有一个kubernetes集群,社区为了满足不同场景下,提供了不同的安装方法以适应各种场景需求,常见方法有:MiniKube,是一个将kubernetes单节点安装在本地虚拟化工具,MiniKube安装文档二进制安装,通过已编译好的二进制文件安装,需设置参数,可定制化强,安装难度大Kubeadm,
分类:
Web程序 时间:
2020-05-21 13:13:08
阅读次数:
69
写在前面由于Docker-EngineDocker官方已经不推荐使用,无法安装了,所以现在安装Docker-CE。参考官方文档https://docs.rancher.cn/rancher2x/install-prepare/basic-environment-configuration.html#_4-1-docker%E5%AE%89%E8%A3%85安装步骤1.关闭防火墙systemctls
分类:
其他好文 时间:
2020-05-20 18:43:05
阅读次数:
70