操作系统环境[root@62290133db0c~]#cat/etc/issue
CentOSrelease6.7(Final)
Kernel\ronan\m
[root@62290133db0c~]#getconfLONG_BIT
64redis安装请参考redis安装一遍博文，redis集群是在3.0中推出的集群功能...........由于资源有限，只好在一台机器上搭建redis集群环境,redis版..
分类：
其他好文 时间：
2016-01-05 01:39:23
阅读次数：
343
第一步：解压zookeeper-3.4.5.tar.gz到D:\solrCloud目录，重命名为zookeeper-1。第二步：把D:\solrCloud\zookeeper-1\conf\目录下的zoo_sample.cfg修改为zoo.cfg。并写入如下的配置参数：tickTime=2000initLimit=10syncLimit=5dataDir=D:/solrCloud/zookeeper-1/datadataLogDir..
作者：周志湖
网名：摇摆少年梦
微信号：zhouzhihubeyond本节主要内容
操作系统环境准备
Hadoop 2.4.1集群搭建
Spark 1.5.0 集群部署
注：在利用CentOS 6.5操作系统安装spark 1.5集群过程中，本人发现Hadoop 2.4.1集群可以顺利搭建，但在Spark 1.5.0集群启动时出现了问题（可能原因是64位操作系统原因，源码需要重新编译，但本人没经...
分类：
其他好文 时间：
2015-12-28 22:09:41
阅读次数：
246
1：在192.168.80.200服务器上执行这些操作，把这个zookeeper-3.4.5.tar.gz文件上传到服务器上的/usr/local目录下 2：解压：tar -zxvf zookeeper-3.4.5.tar.gz 3：重命名：mv zookeeper-3.4.5 zookeeper ...
分类：
其他好文 时间：
2015-12-26 20:56:40
阅读次数：
251
基于VMware的虚拟Linux集群搭建-lvs+keepalived本文通过keepalived实现lvsserver的的双机热备和真实server之间的负载均衡。这方面的blog挺多，可是每一个人搭建集群的环境不同，遇到的问题也不同。本文简述配置的一些过程以及配置过程中遇到问题时的解决方式。准本...
分类：
系统相关 时间：
2015-12-24 13:28:03
阅读次数：
322
一、Shark简单介绍Shark是基于Spark与Hive之上的一种SQL查询引擎，官网的架构图及性能測试图例如以下：(Ps:本人也做了一个性能測试见Shark性能測试报告)我们涉及到了2个依赖组件，1是Apache Spark， 另外一个是AMPLAB的Hive0.11.这里注意版本号的选择。一定...
分类：
其他好文 时间：
2015-12-22 10:20:16
阅读次数：
355
开发了一年的App日活日渐增多，这当然是一件好事。可惜服务器端的压力则明显增大，解决服务器性能的问题迫在眉睫。优化了一些代码逻辑后决定捡起之前使用过的集群，本片文章这题及为了记录在配置集群中碰到的问题和解决方式。之前做过的集群方式是，使用Apache做负载均衡，这里依旧使用Apache。然而由于公司...
分类：
Web程序 时间：
2015-12-14 21:29:02
阅读次数：
226
mkdir-p/home/hadoop/zookeeper/da
tacd/home/hadoop/zookeeper/datadataDir=/home/hadoop/zookeeper/data
server.1=10.10.113.41:2888:3888
server.2=10.10.113.42:2888:3888
server.3=10.10.113.43:2888:3888#zookeeper
exportZOOKEEPER==/home/hadoop/zookeeper
PATH=$PATH:..
分类：
其他好文 时间：
2015-12-10 17:15:06
阅读次数：
225
之前有朋友问如何搭建一个更为稳定、数据更为安全、执行效率更高的Hadoop集群，其实搭建一个HA机制的集群就能满足这些需求。所以就以前的工作上的一些经验和总结来和大家介绍一下什么是高可用的Hadoop集群，以及如何把这个高可用的Hadoop集群搭建起来1、什么是HA机制 1.1、Hadoop-HA....
分类：
其他好文 时间：
2015-12-03 02:17:08
阅读次数：
231
作者：周志湖
微信号：zhouzhihubeyond本节为下一节Kafka与Spark Streaming做铺垫主要内容1.kafka 集群搭建1. kafka 集群搭建
kafka 安装与配置到下面的地址下载：Scala 2.10 - kafka_2.10-0.8.2.1.tgz
http://kafka.apache.org/downloads.html
下载完成后，使用命令
tar...
分类：
其他好文 时间：
2015-12-03 00:49:36
阅读次数：
408
