Spark搭建集群比较繁琐,需要的内容比较多,这里主要从Centos、Hadoop、Hive、ZooKeeper、kafka的服务器环境搭建开始讲。其中Centos的搭建不具体说了,主要讲下集群的配置。 环境搭建软件包 由于我是直接拿了三台现成的Centos 5.6的系统上进行搭建的,所以Cento ...
分类:
其他好文 时间:
2016-08-06 20:31:34
阅读次数:
111
[不忘初心]
前文,我们简要翻译了Redis集群的内容,在搭建集群的过程中,我们经常使用的功能就是主从复制,冗余备份。本文我们就来介绍这部分的内容。好了,马上开始我们的正文部分吧。
-----------------------------------------------------------------------------------------------------------...
分类:
数据库 时间:
2016-07-14 10:29:56
阅读次数:
316
【Vmware中在搭建集群环境等,DHCP自动获取IP方式不方便,为了固定IP减少频繁更改配置信息,建议使用静态IP来配置,网络连接主要有三种方式 1.nat 2.桥接,3主机模式 ,在这里主要介NAT方式, 为什么使用NAT静态IP而不用桥接静态IP,主要是桥接方式存在一定安全性,使用NAT是经过 ...
分类:
系统相关 时间:
2016-07-13 22:44:27
阅读次数:
295
Nginx+Apache+PHP+MySQL搭建集群服务器过程详解
概念介绍在本文未能提及,请自助上网科普,直接进入过程详解:
集群架构图大致如下:
一、软件下载
序号
软件名称
软件版本
下载地址
1
操作系统
Window...
分类:
其他好文 时间:
2016-07-13 17:20:47
阅读次数:
332
开始JStorm学习之前需要搭建集群环境,这里演示搭建单机JStorm环境,仅供学习使用,生产环境部署大同小异,但建议参考JStorm社区及相关说明文档。 一、前提 JStorm核心代码均用Java实现,所以依赖Java Runtime,另外,JStorm有脚本采用Python实现,所以还需要Pyt ...
分类:
Web程序 时间:
2016-07-09 02:00:14
阅读次数:
672
(清空防火墙和禁用selinux)1.在每个数据库中创建用于同步数据库的账号GRANTUSAGEON*.*toroot@‘%‘IDENTIFIEDBY‘1234‘;GRANTALLPRIVILEGESon*.*toroot@‘%‘;FLUSHPRIVILEGES;2.cd/usr/share/mysql/cpmy-large.cnf/etc/my.cnfcpwsrep.cnf/etc/my.cnf.d/wsrep.cnf3.第一个节点vimmy...
分类:
数据库 时间:
2016-07-05 22:46:08
阅读次数:
255
在传统的mongoDB集群中,configserver使用的是mirror的方式,在其宕机后,则需要重启所有集群成员来链接镜像configserver。在新版本3.2中,configserver支持复制集模式,避免了上述问题的发生。搭建集群时,shard的搭建方式和传统的完全一样,不同的是mongos和configserver的配..
分类:
数据库 时间:
2016-07-03 23:47:12
阅读次数:
533
由于需要建立集群,使用linux操作系统,第一步搭建集群环境;为了组内通讯,不许配置静态ip。 配置网卡的静态ip: 1)获取root权限 2)配置静态ip 注意:最好先输入 ifconfig 查看下网卡的名字,开始本人根据网络教程网卡名写成了eth0,静态ip怎么配置都不成功。 3)配置dns服务 ...
分类:
系统相关 时间:
2016-06-04 14:48:39
阅读次数:
208
1.用处 搭建集群或者工作中登陆跳板机经常需要做免秘钥互相登陆彼此服务器。 2. 准备工作 假设A主机10.20.0.1想通过ssh登录到B主机10.20.0.2上。 那么客户端(A主机)需要安装ssh客户端软件,服务器端(B主机开机sshd进程)需要安装ssh服务器软件。 ssh客户端Linux发 ...
分类:
其他好文 时间:
2016-06-03 06:27:57
阅读次数:
144
第一次配置zookeeper的集群 因为想运行storm必须搭建集群在自己的电脑上拷贝了自己的ubuntu虚拟机采用的是vmware给虚拟机分配的地址三个机器的配置基本上一样除了myid这个文件看了这么久的一致,选举什么的也想试试这个过程的感觉 首先下载安装一个ubuntu安装配置好jdk 下载zo ...
分类:
系统相关 时间:
2016-05-25 14:43:57
阅读次数:
930