Hadoop集群搭建好之后,解压Spark文件即可 Spark安装包 http://yunpan.cn/csPh8cf2n5WrT 提取码 1085 Spark命令-统计README.md文件行数,以及寻找所含关键字,以及文件第一行的相关命令 val lines = sc.textFile("REA...
分类:
其他好文 时间:
2015-04-14 09:51:10
阅读次数:
751
Heartbeat项目是Linux-HA工程的一个组成部分,它实现了一个高可用集群系统。通过Heartbeat我们可以实现双机热备,以实现服务的持续性。linux下基于heartbeat的简单web服务的高可用集群搭建首先规划好两台主机作为heartbeat的双机热备,命名为node1.lvni.cc(主);node2.lvni.cc..
分类:
系统相关 时间:
2015-04-13 23:06:31
阅读次数:
583
搭建mongodb集群很多次,每次都会或多、或少出现一些见鬼的问题,写这边博客供以后参考。本次是基于mongodb3.0进行集群的搭建;搭建步骤如下:1、设置操作系统的环境echo"never">"/sys/kernel/mm/transparent_hugepage/enabled"
echo"never">"/sys/kernel/mm/transparent..
分类:
数据库 时间:
2015-04-10 20:24:36
阅读次数:
187
1.准备 1>redis-3.0 tar包 2>yumrubyrubygem 提示:①安装rubygem时,有可能需先安装ruby-rdoc,然后执行ruby setup.rb与gem install -l redis ②安装redis,先解压,进入rdis安装目录,make&mak...
分类:
其他好文 时间:
2015-04-09 19:05:41
阅读次数:
169
安装ruby 1)????? sudo apt-get install ruby 2)????? sudo apt-get install ruby-full rubygems 3)????? sudo gem install redis(这条命令话费时间较长,需等待下) 创建节点文件夹 1.????? ...
分类:
其他好文 时间:
2015-04-07 12:16:00
阅读次数:
651
一、写在前面 这一篇是对搭建Gerrit集群环境时遇到的问题及解决方案的小结。不谈细节,我们搭建这个集群需要达到的最直接效果是:用户访问且仅访问一个Gerrit服务器地址,集群内任意服务器都有能力响应。这里说的“有能力”,由SSH传输协议展开。二、集群服务器共享用户公钥 用户如果需要从Ger...
分类:
其他好文 时间:
2015-04-05 20:22:35
阅读次数:
142
一、 说明
本次分布式部署solr是在两台服务器(10.21.16.31和10.21.16.34)上部署5个结点,10.21.16.31服务器部署3个结点,10.21.16.34服务器部署2个结点
二、 下载需要的工具包
zookeeper-3.4.5.tar.gz,tomcat-7.0.50.tar.gz,solr-4.10.1.tgz(jdk必须是7,可以使用系统自带的openJ...
分类:
其他好文 时间:
2015-04-03 09:24:14
阅读次数:
185
安装环境:集群中包括3个节点,1个master,2个slave,节点之间通过局域网连接,可以相互ping通,并可以互相ssh免密码登陆。节点IP地址分布如下:192.168.25.140 master192.168.25.141 slave1192.168.25.142 slave2软件版本:JDK...
分类:
其他好文 时间:
2015-04-02 14:58:08
阅读次数:
258
一、写在前面 公司安卓部门在扩张,尤其是我们这一拨新人进来后,本来负载就很重的Gerrit服务器更加吃不消了。前段时间,我有幸全程参与搭建了Gerrit服务器集群,在这里也将搭建过程总结记录下来,给自己也给他人做一个参考,有误或者有更好的建议都期待指教~二、Gerrit服务器简介 简言之,就是基.....
分类:
其他好文 时间:
2015-03-31 06:20:16
阅读次数:
1645
集群构架图如下:集群大致文件结构:(192.168.137.101节点)先搭建3个副本集rs1/mongod.confrs1/start.shrs2/mongod.conf后面类似......mongo 192.168.137.101:10001/adminconf = {_id:"rs1",mem...
分类:
数据库 时间:
2015-03-22 01:39:38
阅读次数:
249