使用DockerSwarm搭建分布式爬虫集群在爬虫开发过程中，你肯定遇到过需要把爬虫部署在多个服务器上面的情况。此时你是怎么操作的呢？逐一SSH登录每个服务器，使用git拉下代码，然后运行？代码修改了，于是又要一个服务器一个服务器登录上去依次更新？有时候爬虫只需要在一个服务器上面运行，有时候需要在200个服务器上面运行。你是怎么快速切换的呢？一个服务器一个服务器登录上去开关？或者聪明一点，在Red
分类：
其他好文 时间：
2020-12-09 11:53:29
阅读次数：
6
编写dockerFile 注：docker端口集合 ? 2377/tcp 客户端和swarm的通信 ? 7946/tcp 和 7946/tcp 用于控制面 gossip 的分发 ? 4789/dup 用于VXLAN的覆盖网络 1、dockerfile 中各个命令含义： 2、cmd和entrypoin ...
分类：
其他好文 时间：
2020-11-30 15:43:44
阅读次数：
4
容器中的文件在磁盘上是临时存放的，当容器重建时，容器中的文件将会丢失，另外当在一个Pod中同时运行多个容器时，常常需要在这些容器之间共享文件，这也是容器不好解决的问题。Kubernetes抽象出了Volume来解决这两个问题，也就是存储卷，Kubernetes的Volume是Pod的一部分，Volume不是单独的对象，不能独立创建，只能在Pod中定义。Pod中的所有容器都可以访问Volume，但必
分类：
其他好文 时间：
2020-11-27 11:49:31
阅读次数：
22
什么是PodPod是Kubernetes创建或部署的最小单位。一个Pod封装一个或多个容器（container）、存储资源（volume）、一个独立的网络IP以及管理控制容器运行方式的策略选项。Pod使用主要分为两种方式：Pod中运行一个容器。这是Kubernetes最常见的用法，您可以将Pod视为单个封装的容器，但是Kubernetes是直接管理Pod而不是容器。Pod中运行多个需要耦合在一起工
分类：
Web程序 时间：
2020-11-27 11:21:26
阅读次数：
10
StorageClass&PV&PVC关系图Volumes是最基础的存储抽象，其支持多种类型，包括本地存储、NFS、FC以及众多的云存储，我们也可以编写自己的存储插件来支持特定的存储系统。Volume可以被Pod直接使用，也可以被PV使用。普通的Volume和Pod之间是一种静态的绑定关系，在定义Pod的同时，通过volume属性来定义存储的类型，通过volumeMount来定义容
分类：
Web程序 时间：
2020-11-23 12:30:15
阅读次数：
10
Docker 镜像 镜像是一种轻量级、可执行的独立软件包，用来打包软件运行环境和基于运行环境开发的软件，它包含运行某个软件所需的所有内容，包括代码、运行时、库、环境变量和配置文件。 UnionFS 联合文件系统 Union 文件系统（UnionFS）是一种分层、轻量级并且高性能的文件系统，它支持对文 ...
分类：
其他好文 时间：
2020-11-20 11:34:06
阅读次数：
6
一个做ftp的docker-compose文件 version: "2.0" services: ftp-server: image: fauria/vsftpd container_name: ftp-test1 ports: - "2340:20" - "2341:21" - "21100-21 ...
分类：
其他好文 时间：
2020-11-16 13:26:52
阅读次数：
6
创建容器：dockerservicecreate-d--replicas2-namehellowork--network=netk--container-label‘provider=generic‘镜像crate命令参数：-d后台运行--replicas2运行两个副本-eenv为在一个任务中的所有任务设置环境变量-l--label一个label是key=value键值对应用到服务
分类：
其他好文 时间：
2020-11-12 14:21:01
阅读次数：
7
空间分析——题目2 容积率（Plot Ratio/Floor Area Ratio/Volume Fraction）又称建筑面积毛密度，是指一个小区的地上总建筑面积与用地面积的比率。对于开发商来说，容积率决定地价成本在房屋中占的比例，而对于住户来说，容积率直接涉及到居住的舒适度，按照下列要求，计算建 ...
分类：
其他好文 时间：
2020-11-12 13:48:25
阅读次数：
10
