一、概念 1、什么是kafka Kafka是由Apache软件基金会开发的一个开源的分布式流处理平台，由Scala和Java编写。Kafka是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），它可以处理消费者在网站中的所有动作流数据。 Kafk ...
分类：
其他好文 时间：
2019-10-15 09:57:16
阅读次数：
70
2.1 下载kafka并安装kafka_2.12-2.3.0.tgz 2.2 配置kafka集群 2.3 拷贝至各节点scp -r ~/kafka_2.12-2.3.0 hadoop02:~/scp -r ~/kafka_2.12-2.3.0 hadoop03:~/2.4 到各节点修改server. ...
分类：
其他好文 时间：
2019-10-02 12:37:33
阅读次数：
111
1.从官网下载安装包，并通过Xftp5上传到机器集群上 下载kafka_2.11-1.1.0.tgz版本，并通过Xftp5上传到hadoop机器集群的第一个节点node1上的/opt/uploads/目录： 2、解压kafka_2.11-1.1.0.tgz，并把解压的安装包移动到/opt/app/目 ...
分类：
其他好文 时间：
2019-10-02 00:45:21
阅读次数：
89
单机安装 1. 安装 java 2. 安装 zookeeper 【这一步可以没有，因为 kafka 自带了 zookeeper】 3. 安装 kafka 下载链接 kafka 解压 启动 zookeeper 服务；如果使用 kafka 自带的 zookeeper，也需要先启动 ，自带 zk 启动命令 ...
分类：
其他好文 时间：
2019-09-05 18:50:31
阅读次数：
115
一、安装 broker.id=1 #当前server的ID listeners=PLAINTEXT://192.168.34.160:9092 log.dirs=/usr/local/kafka/logs num.partitions=2 #根据机器数设置 zookeeper.connect=192 ...
分类：
其他好文 时间：
2019-08-10 11:53:26
阅读次数：
73
一、安装 双击kafkatool_64bit.exe安装kafka可视化工具，并且C:\Windows\System32\drivers\etc配置HOSTS，打开HOSTS并添加： HOSTS添加： HOSTS添加的域名，是kafka安装服务器的IP 用户名，必要时登录linux服务器检查一下 二 ...
分类：
其他好文 时间：
2019-07-31 12:37:48
阅读次数：
1140
前提 假设你了解过 SpringBoot 和 Kafka。 1、SpringBoot 如果对 SpringBoot 不了解的话，建议去看看 DD 大佬 和 纯洁的微笑 的系列博客。 2、Kafka Kafka 的话可以看看我前两天写的博客 ： Kafka 安装及快速入门 学习的话自己开台虚拟机自己手 ...
分类：
编程语言 时间：
2019-07-31 01:20:54
阅读次数：
125
cloudera manager 管理CDH 以及kafka安装
分类：
其他好文 时间：
2019-07-21 01:38:19
阅读次数：
152
使用docker 安装kafka时报错 查看报错日志 查看内存使用情况 创建swapfile 将swapfile设置为swap空间 启用交换空间，这个操作有点类似于mount操作 至此增加交换空间的操作结束了，可以使用free命令查看swap空间大小是否发生变化 kafka 安装成功~ 参考博客：h ...
分类：
其他好文 时间：
2019-07-15 15:58:14
阅读次数：
392
提前准备： 安装jdk-8u201-linux-x64.tar.gz环境 安装zk集群，也可以采用kafka自带的zk，这里我使用的是自己创建的zk集群 服务器IP: zk1:192.168.1.2 zk2:192.168.1.3 zk3:192.168.1.4 kafka:192.168.1.5 ...
分类：
其他好文 时间：
2019-07-10 16:34:03
阅读次数：
69
