转:http://www.cnblogs.com/luotianshuai/p/5206662.html Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 我们想分析下用户行为(pageviews),以便我们设计出更好的广告位 我想 ...
分类:
其他好文 时间:
2018-05-19 13:55:42
阅读次数:
147
ZooKeeper集群的一些基本概念 zookeeper集群搭建: zk集群,主从节点,心跳机制(选举模式) 配置数据文件 myid 1/2/3 对应 server.1/2/3 通过 zkCli.sh -server [ip]:[port] 命令检测集群是否配置成功 和其他大多数集群结构一样,zoo ...
分类:
其他好文 时间:
2018-05-18 22:51:49
阅读次数:
210
mkdir /usr/local/rediscp /tmp/redis-4.0.0.tar.gz /usr/local/redis/cp /tmp/ruby-2.3.2.tar.gz /usr/local/redis/cd /usr/local/redistar -zxvf redis-4.0.0. ...
分类:
其他好文 时间:
2018-05-18 13:46:35
阅读次数:
198
折腾了这么久,hbase终于装好了 上篇: Hadoop3集群搭建之——虚拟机安装 Hadoop3集群搭建之——安装hadoop,配置环境 Hadoop3集群搭建之——配置ntp服务 Hadoop3集群搭建之——hive安装 在安装之前,查了一下资料,关于hbase与hadoop兼容性的。 最开始看 ...
分类:
其他好文 时间:
2018-05-18 01:24:49
阅读次数:
420
在一台机器上搭建redis集群redis版本3.2我这也是需要搭建然后网上找文档然最后总结的参考:https://blog.csdn.net/u012042021/article/details/728187591,解压源码包安装redis#安装需要的一些包yuminstallrubyrubygemopenssl#此步安装时候,是没有输出的,只要不报错慢慢等待就好了或者加-V参数看过程gemins
分类:
其他好文 时间:
2018-05-17 15:12:09
阅读次数:
488
Hive在客户端上的安装部署 一、客户端准备: 到这我相信大家都已经打过三节点集群了,如果是的话则可以跳过一,直接进入二。如果不是则按流程来一遍! 1、克隆虚拟机,见我的博客:虚拟机克隆及网络配置 2、 实现客户端和集群的连接(该步骤为多节点集群搭建,详情见我博客:三节点Hadoop集群搭建,有多节 ...
分类:
其他好文 时间:
2018-05-14 22:04:45
阅读次数:
207
Kafka集群管理、状态保存是通过zookeeper实现,所以先要搭建zookeeper集群 zookeeper集群搭建 一、软件环境: zookeeper集群需要超过半数的的node存活才能对外服务,所以服务器的数量应该是2*N+1,这里使用3台node进行搭建zookeeper集群。 1. 3台 ...
分类:
其他好文 时间:
2018-05-11 14:31:35
阅读次数:
232
一、 Activemq主备搭建 Shared Filesystem Master-Slave方式 shared filesystem Master-Slave部署方式主要是通过共享存储目录来实现master和slave的热备,所有的ActiveMQ应用都在不断地获取共享目录的控制权,哪个应用抢到了控 ...
分类:
其他好文 时间:
2018-05-10 19:28:58
阅读次数:
206
elasticsearch环境搭建及单节点搭建可参考我的上一篇:http://www.cnblogs.com/xuwenjin/p/8745624.html 本文以Elaticsearch 6.2.2 版本为基础,讲解Elasticsearch三个节点的分布式部署、核心配置的含义以及分布式部署遇到的 ...
分类:
其他好文 时间:
2018-05-10 11:36:38
阅读次数:
192