HAdoop集群实战一:Zookeeper集群部署HAdoop集群实战二:Hadoop集群部署HAdoop集群实战三:Namenode高可用HA部署HAdoop集群实战四:Hbase集群部署HAdoop集群实战五:Hive集群部署HAdoop集群实战六:Kafka集群部署HAdoop集群实战七:Hive、Hbase集群整合...待更新HAdoop集群实战八:Hive、Hbase集群整合测试...待
分类:
其他好文 时间:
2019-01-25 19:21:51
阅读次数:
208
Zookeeper+Kafka集群部署 主机规划: 10.200.3.85 Kafka+ZooKeeper 10.200.3.86 Kafka+ZooKeeper 10.200.3.87 Kafka+ZooKeeper 软件下载地址: 三台主机hosts文件一致: 一、安装zookeeper 1.在 ...
分类:
其他好文 时间:
2018-04-09 21:15:16
阅读次数:
461
前提:kafka集群依赖于zk集群,没有zk集群环境的请先参考 http://www.cnblogs.com/yjmyzz/p/4587663.html . 假设搭建3个节点的kafka集群,下面是步骤: 一、下载 http://kafka.apache.org/downloads ,如果只是安装, ...
分类:
其他好文 时间:
2018-03-09 15:06:41
阅读次数:
195
1、集群部署的基本流程 Storm上游数据源之Kakfa 下载安装包、解压安装包、修改配置文件、分发安装包、启动集群 2、基础环境准备 3、集群部署 3.1下载安装包 wget http://mirrors.hust.edu.cn/apache/kafka/0.8.2.2/kafka_2.11-0. ...
分类:
其他好文 时间:
2018-01-07 17:24:20
阅读次数:
124
前提:kafka集群依赖于zk集群,没有zk集群环境的请先参考 http://www.cnblogs.com/yjmyzz/p/4587663.html . 假设搭建3个节点的kafka集群,下面是步骤: 一、下载 http://kafka.apache.org/downloads ,如果只是安装, ...
分类:
其他好文 时间:
2017-08-31 14:37:56
阅读次数:
132
1) 每台机器配置如下: $ cat /etc/hosts ...# zookeeper hostnames:192.168.8.182 zk1192.168.8.183 zk2192.168.8.184 zk3 2) 每台机器上安装jdk, zookeeper, kafka, 配置如下: $ vi ...
分类:
其他好文 时间:
2017-08-18 11:09:55
阅读次数:
118
题记 眼下我们对大数据进行研究方向以Spark为主,当中Spark Streaming是能够接收动态数据流并进行处理。那么Spark Streaming支持多源的数据发送端,比如TCP、ZeroMQ、自然也包含Kafka,并且Kafka+SparkStreaming的技术融合也比較经常使用并且成熟, ...
分类:
其他好文 时间:
2017-07-20 10:25:55
阅读次数:
304
原文链接:http://www.cnblogs.com/luotianshuai/p/5206662.html Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 这些场景都有一个共同点: 数据是由上游模块产生,上游模块,使用上游模块 ...
分类:
其他好文 时间:
2017-06-30 12:34:58
阅读次数:
180