1、创建topic 使用 kafka-topics.sh脚本 kafka-topics.sh --create --partitions 3 --replication-factor 2 --topic test --zookeeper hadoop01:2181,hadoop02:2181,had ...
分类：
其他好文 时间：
2021-06-20 18:38:22
阅读次数：
0
zookeepr入门 一、简介 zookeeper是一个开源的分布式的，为分布式应用提供协调服务的Apache项目。 1.1、Zookeeper工作机制： zookeeper从设计模式角度来理解：是一个基于观察者模式设计的分布式服务管理框架，他负责存储和管理大家都关心的数据，然后接收观察者的注册，一 ...
分类：
其他好文 时间：
2021-06-19 19:33:22
阅读次数：
0
运行环境 centos 5.6 hadoop hivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 在使用过程中可能遇到的问题：sqoop依赖zookeeper，所以必须配置ZOOKEEPER_HOME到环境变量中。sqo ...
分类：
数据库 时间：
2021-06-19 19:24:57
阅读次数：
0
1.下载Zookeeper 官网 使用wget下载： wget https://mirrors.bfsu.edu.cn/apache/zookeeper/zookeeper-3.7.0/apache-zookeeper-3.7.0-bin.tar.gz 2.解压资源 # 解压资源到指定目录下 tar ...
分类：
其他好文 时间：
2021-06-18 20:04:20
阅读次数：
0
环境描述 生产环境通过gitlab-running实现自动化发布业务，现需要收集客户端的真实ip，需要将externaltrafficpolicy改为lacal模式(原来是cluster模式)，前天开发反映无法发布业务(镜像拉取不成功)。想到就改动过externaltrafficpolicy所以考虑 ...
分类：
其他好文 时间：
2021-06-17 16:29:35
阅读次数：
0
# 1 广播方式（一般不用） -只要es节点能联通，ping，自动加人到节点中 # 2 单播方式 #1 elasticsearch1节点，,集群名称是my_es1,集群端口是9300；节点名称是node1，监听本地9200端口，可以有权限成为主节点和读写磁盘（不写就是默认的）。 cluster.na ...
分类：
其他好文 时间：
2021-06-16 17:35:51
阅读次数：
0
1.前言 在众多的Mysql高可用架构中，MHA架构目前属于现在比较成熟且岁数比较年长的架构之一了，目前，在Mysql的业界比较流行的高可用架构除了MHA，还有官方的MGR高可用架构、Percona公司出品的PXC(percona XtraDB Cluster)高可用架构以及Galera Clust ...
分类：
数据库 时间：
2021-06-15 18:04:53
阅读次数：
0
1. Service Service对象的IP地址也称为Cluster IP，是一种虚拟IP地址，能被同一集群的Pod资源所访问。Service端口用于接收客户端请求并将其转发至其后端的Pod中应用的相应端口之上。这种代理称为“端口代理”或四层代理，它工作于TCP/IP协议栈的传输层。 Servic ...
分类：
其他好文 时间：
2021-06-11 18:10:35
阅读次数：
0
docker安装kafka 1、下载zookeeper镜像 docker pull wurstmeister/zookeeper 2、下载kafka镜像 docker pull wurstmeister/kafka 3、查看镜像 docker images 4、单机方式先启动zookeeper容器 ...
分类：
系统相关 时间：
2021-06-08 22:39:02
阅读次数：
0
运行环境 centos 5.6 hadoop hivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 在使用过程中可能遇到的问题： sqoop依赖zookeeper，所以必须配置ZOOKEEPER_HOME到环境变量中。sq ...
分类：
数据库 时间：
2021-06-07 20:36:05
阅读次数：
0
