参考博文:kafka 配置文件参数详解 参考博文:Kafka【第一篇】Kafka集群搭建 参考博文:如何为Kafka集群选择合适的Partitions数量 参考博文:Kafka Server.properties 参考博文:kafka常用配置【重要】 参考博文:kafka常用配置 1. 主机规划 主 ...
分类:
其他好文 时间:
2018-09-23 13:33:03
阅读次数:
478
1. 启动Server http://kafka.apache.org/quickstart For Kafka, a single broker is just a cluster of size one, so nothing much changes other than starting a ...
分类:
其他好文 时间:
2018-08-02 22:53:15
阅读次数:
272
环境描述服务器名称系统配置Srv01.contoso.comCentOS 7、Kafka_2.11-1.1.0IP:172.16.100.10Srv02.contoso.comCentOS 7、Kafka_2.11-1.1.0IP:172.16.100.20Srv03.contoso.comCentOS 7、Kafka_2.11-1.1.0IP:172.16.100.30Zookeeper集群安装
分类:
其他好文 时间:
2018-07-01 11:56:32
阅读次数:
117
网上关于kafka集群的搭建,基本是单个broker和单个zookeeper,测试研究的意义不大。于是折腾了下,终于把正宗的Kafka集群搭建出来了,在折腾中遇到了很多坑,后续有时间再专门整理份搭建问题分析 docker compose.yml配置文件 启动集群 查看容器启动状态 ...
分类:
其他好文 时间:
2018-06-15 20:05:19
阅读次数:
1363
转:http://www.cnblogs.com/luotianshuai/p/5206662.html Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 我们想分析下用户行为(pageviews),以便我们设计出更好的广告位 我想 ...
分类:
其他好文 时间:
2018-05-19 13:55:42
阅读次数:
147
Mycat+Mysql的读写分离 前言: 在MySQL中间件出现之前,对于MySQL主从集群,如果要实现其读写分离,一般是在程序端实现,这样就带来一个问题,即数据库和程序的耦合度太高,如果我数据库的地址发生改变了,那么我程序端也要进行相应的修改,如果数据库不小心挂掉了,则同时也意味着程序的不可用,而 ...
分类:
其他好文 时间:
2018-04-25 15:54:53
阅读次数:
182
1. scala安装 $ cd /usr/local $ tar -zxvf scala-2.11.4.tgz $ mv scala-2.11.4 scala $ vi ~/.bashrc $ source ~/.bashrc $ scala -version $ scp -r scala root ...
分类:
其他好文 时间:
2018-03-19 10:55:54
阅读次数:
174
1. KAFKA下载地址:http://kafka.apache.org/downloads KAFKA-快速上手-官方网站:http://kafka.apache.org/quickstart 2. 下载完成后解压,修改config目录下的配置文件:server.properties 、zooke ...
分类:
其他好文 时间:
2018-02-08 13:42:07
阅读次数:
216
环境:CentOS 6.5KAFKA版本: kafka_2.11-0.8.2.1ZOOKEEPER版本: zookeeper-3.4.6JDK: 1.8.0_151SERVER: 172.16.2.27、172.16.2.28、172.16.2.29一、准备:1、安装JDK1.82、下载kafka和zookeeper安装包(二进制包)下载地址:kafka:http:/
分类:
其他好文 时间:
2017-12-12 15:00:13
阅读次数:
153
环境:ubuntu14.04 版本:jdk1.8,zookeeper 3.4.10,kafka 2.11 搭建步骤: 1. 搭建zookeeper集群 参考链接:zookeeper集群搭建 2. 下载kafka源码包,并上传到服务器 下载链接:http://mirrors.tuna.tsinghua ...
分类:
其他好文 时间:
2017-11-28 18:47:15
阅读次数:
153