一. 3台Cloudera集群搭建 1. 组建局域网，并且配置SSH ...
分类：
其他好文 时间：
2016-06-27 15:36:28
阅读次数：
159
kafka集群搭建 下面简单的介绍一下kafka的集群搭建，单个kafka的安装更简单，下面以集群搭建为例子。 我们设置并部署有三个节点的 kafka 集合体，必须在每个节点上遵循下面的步骤来启动 kafka 服务器，kafka集群需要依赖zookeeper集群，上一篇已经说道了zookeeper的 ...
分类：
其他好文 时间：
2016-06-26 00:37:13
阅读次数：
475
zookeeper概念 ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名 服务等。Zookeeper是hadoop的一个子项目，其发展历程无需赘述。在分布式应用中，由于工程师不能很好地使用锁机制，以及基于 ...
分类：
其他好文 时间：
2016-06-24 23:28:50
阅读次数：
296
一、前期准备工作
相关工具：
1.虚拟机（VMware）
2.tomcat7 64位 下载地址：http://tomcat.apache.org/download-70.cgi
3.centos6.4 64位
4.linux下的64位jdk安装包，版本为6或以上
5. solr-4.3.1.tgz包 下载：http://archive.apache.org/dist/luce...
分类：
其他好文 时间：
2016-06-21 07:51:25
阅读次数：
160
FastDFS相关知识什么是FastDFS？FastDFS是一个开源的轻量级分布式文件系统。它解决了大数据量存储和负载均衡等问题。特别适合以中小文件（建议范围：4KB<file_size<500MB）为载体的在线服务，如相册网站、视频网站等等。FastDFS的角色：Trackerserver:Trackerserver作为..
分类：
其他好文 时间：
2016-06-17 17:43:04
阅读次数：
253
redis3.0.6
makeMALLOC=libc
mkdir-p/usr/local/cluster
cd/usr/local/cluster
mkdir{7000,7001,7002}
cp/home/back/redis3.0.6/redis.conf/usr/local/cluster
viredis.conf
##修改配置文件中的下面选项
port7000
daemonizeyes
cluster-enabledyes
cluster-config-fileredis-n..
分类：
其他好文 时间：
2016-06-14 19:51:29
阅读次数：
187
安装环境： 虚拟操作系统：centOS7 64位 2台 IP地址为192.168.1.10 192.168.1.11 内存：1GB内存 zookeeper版本 ：3.4.6 Storm版本：0.9.6 安装步骤： 1、安装JDK等步骤省略。 1、下载storm安装包，解压。 1、配置/apache- ...
分类：
其他好文 时间：
2016-06-03 22:45:14
阅读次数：
274
安装环境： 虚拟操作系统：centOS7 64位 2台 IP地址为192.168.1.10 192.168.1.11 内存：1GB内存 zookeeper版本 ：3.4.6 安装前准备： 1、设置固定IP地址，编辑/etc/sysconfig/network-scripts/ifcfg-eno文件如 ...
分类：
其他好文 时间：
2016-06-03 22:43:52
阅读次数：
244
问题导读：
1.zookeeper在kafka的作用是什么？
2.kafka中几乎不允许对消息进行“随机读写”的原因是什么？
3.kafka集群consumer和producer状态信息是如何保存的？
4.partitions设计的目的的根本原因是什么？
一、入门
1、简介
Kafka is a distribu...
分类：
其他好文 时间：
2016-06-02 14:39:21
阅读次数：
215
最近为了方便开发，在自己的虚拟机上搭建了三节点的Hadoop集群与Hbase集群，hadoop集群的搭建与zookeeper集群这里就不再详细说明，原来的笔记中记录过。这里将hbase配置参数进行相应整理，方便日后使用。 首先vi ~/.bash_profile将hbase的环境变量进行配置，最后s ...
