StatefulSet StatefulSet是为了解决有状态服务的问题(对应Deployments和ReplicaSets是为无状态服务而设计),其应用场景包括 稳定的持久化存储,即Pod重新调度后还是能访问到相同的持久化数据,基于PVC来实现 稳定的网络标志,即Pod重新调度后其PodName和 ...
分类:
Web程序 时间:
2019-09-02 17:15:53
阅读次数:
121
本文探索了K8S的数据管理方案Volume,其中普通类型的Volume如emptyDir和hostPath虽然使用方便,但是可持久性不强,而外部云存储Volume Provider则提供了更好的持久化存储。PV和PVC的模式,更加适合于我们使用在实际环境中,最后还通过了一个MySQL持久化案例演示了... ...
分类:
Web程序 时间:
2019-09-02 11:30:17
阅读次数:
136
“检索”是很多产品中无法绕开的一个功能模块,当数据量小的时候可以使用模糊查询等操作凑合一下,但是当面临海量数据和高并发的时候,业界常用 elasticsearch 和 lucene 等方案,但是elasticsearch对运行时内存有着最低限额,其运行时大小推荐 2G 以上的内存空间,并且需要额外的 ...
分类:
其他好文 时间:
2019-09-01 14:52:43
阅读次数:
134
准备工作 什么是框架?如何学习框架? 就是一个集成了各种功能且具有很强通用性(可以被应用在各种不同的需求中)的一个项目模板. scrapy集成了哪些功能: 高性能的数据解析操作,持久化存储操作,高性能的数据下载的操作..... 环境的安装: scrapy的基本使用 创建一个工程:scrapy sta ...
分类:
其他好文 时间:
2019-08-30 22:40:11
阅读次数:
74
1. 数据库的基本概念 2. MySQL数据库软件 1. 安装 2. 卸载 3. 配置 3. SQL ## 数据库的基本概念 1. 数据库的英文单词: DataBase 简称 : DB 2. 什么数据库? * 用于存储和管理数据的仓库。 3. 数据库的特点: 1. 持久化存储数据的。其实数据库就是一 ...
分类:
数据库 时间:
2019-08-25 00:54:52
阅读次数:
247
package cn.aikang.MySql;public class MySqlTest {/*数据库的基本概念: 1.数据库的英文单词:DataBase简称:DB 2.什么是数据库:用于存储和管理数据的仓库 3.数据库的特点: 1.持久化存储数据,数据库就是一个文件系统 2. 方便存储和管理数 ...
分类:
数据库 时间:
2019-08-24 11:36:28
阅读次数:
188
第1章 redis存储系统 1.1 redis概述 REmote DIctionary Server(Redis)是一个基于key-value键值对的持久化数据库存储系统。redis和大名鼎鼎的Memcached缓存服务软件很像,但是redis支持的数据存储类型比memcached更丰富,包括str ...
分类:
数据库 时间:
2019-08-22 23:56:55
阅读次数:
202
准备NFS服务192.168.1.244$yum-yinstallnfs-utilsrpcbind$systemctlstartnfs-serverrpcbind$systemctlenablenfs-serverrpcbind$mkdir-p/data/k8s$cd/data/k8s$echo11111111>index.html$vim/etc/exports/data/k8s*(rw,
分类:
其他好文 时间:
2019-08-22 15:57:10
阅读次数:
98
原文: http://blog.gqylpy.com/gqy/363 " 基于终端指令的持久化存储 前提:保证爬虫文件中的parse方法的返回值为可迭代数据类型(通常为list/dict)。 该返回值可以通过终端指令的形式写入指定格式的文件中进行持久化存储。 执行如下命令进行持久化存储: __ __ ...
分类:
其他好文 时间:
2019-08-18 21:59:42
阅读次数:
61
一、简介 ApacheKafka 是一个分布式的流处理平台。它具有以下特点: + 支持消息的发布和订阅,类似于 RabbtMQ、ActiveMQ 等消息队列; + 支持数据实时处理; + 能保证消息的可靠性投递; + 支持消息的持久化存储,并通过多副本分布式的存储方案来保证消息的容错; + 高吞吐率 ...
分类:
其他好文 时间:
2019-08-18 09:47:48
阅读次数:
78