准备：1. 规划3个集群节点:hosts主机都已经配置好映射，映射主机名分别为master,slave1,slave2,且已经进行ssh免密配置，确保端口互通，防火墙关闭 2. 先安装好scala(参考：https://www.cnblogs.com/sea520/p/13518158.html) ...
分类：
其他好文 时间：
2021-06-19 19:11:31
阅读次数：
0
官方中文文档：https://kafka.apachecn.org/quickstart.html 1 下载安装包&解压缩 下载地址：http://kafka.apache.org 解压缩命令**(根据实际情况选择解压路径)**： tar -zxvf kafka_2.11-1.0.1.tgz -C ...
分类：
其他好文 时间：
2021-06-19 19:05:25
阅读次数：
0
HDFS的读取过程 HDFS的读取流程大致有以下几个步骤： （1）客户端通过调用FileSystem对象的open()来打开希望读取的文件。对于HDFS平台来说，这个对象是DistributedFileSystem类的是一个实例，所以实际调用的是DistributedFileSystem对象的ope ...
分类：
其他好文 时间：
2021-06-19 18:42:26
阅读次数：
0
在实现分库分表的情况下，数据库自增主键已经无法保证在集群中是全局唯一的主键了，因此mycat提供了全局的sequence，并且提供了本地配置、数据库配置等多种实现方式。 1. 本地文件方式 采用该方式，mycat将sequence配置到classpath目录的sequence_conf.proper ...
分类：
其他好文 时间：
2021-06-19 18:40:35
阅读次数：
0
1.下载Zookeeper 官网 使用wget下载： wget https://mirrors.bfsu.edu.cn/apache/zookeeper/zookeeper-3.7.0/apache-zookeeper-3.7.0-bin.tar.gz 2.解压资源 # 解压资源到指定目录下 tar ...
分类：
其他好文 时间：
2021-06-18 20:04:20
阅读次数：
0
一、运行架构 Jenkins的kubernetes plugin在执行构建时会在kubernetes集群中自动创建一个Pod，并在Pod内部创建一个名为jnlp的容器，该容器会连接Jenkins并运行Agent程序，形成一个Jenkins的Master和Slave架构，然后Slave会执行构建脚本进 ...
分类：
其他好文 时间：
2021-06-18 20:01:37
阅读次数：
0
性能测试流程 注意要点 测试机器硬件配置尽量和线上一致 系统版本与线上一致 测试环境部署线上最小单元模块（一般线上都是集群部署，线下可以用最小的单元集群） 应用、中间件、数据库要与线上一致 其他特殊配置 数据构造 ? 业务接口 ? -- 适合数据表关系复杂 ? -- 优点： 数据完整性比较好 ? 存 ...
分类：
其他好文 时间：
2021-06-18 19:57:35
阅读次数：
0
本资料以VMware虚拟机为节点进行创建kubernetes集群。 1.K8S集群部署节点规划 K8S-master01：K8S集群控制节点； K8S-node01、K8S-node02：运行POD的工作节点； harbor：创建本地镜像私有仓库； router：软路由koolshare，为K8S集 ...
分类：
Web程序 时间：
2021-06-18 19:15:03
阅读次数：
0
Kubenetes是一个针对容器应用，进行自动部署，弹性伸缩和管理的开源系统。主要功能是生产环境中的容器编排。 K8S是Google公司推出的，它来源于由Google公司内部使用了15年的Borg系统，集结了Borg的精华。 和大多数分布式系统一样，K8S集群至少需要一个主节点（Master）和多个 ...
分类：
其他好文 时间：
2021-06-18 18:59:17
阅读次数：
0
kafka几圈搭建好了，但当一个节点挂机后整个集群还是不能使用并没有起到集群的作用，这是为什么？ 在新版本Kafka中，__consumer_offsets这个topic是存放消费者偏移量的，但是该主题默认配置副本数量只有1，容易造成单点故障 注：上一篇博客地址https://www.cnblogs ...
分类：
其他好文 时间：
2021-06-18 18:52:34
阅读次数：
0
