1.集群简介 Hadoop集群具体来说包括两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起。 HDFS集群: 负责海量数据的存储,集群中的角色主要有NameNode/DataNode YARN集群: 负责海量数据运算时的资源调度,集群中的角色主要有ResourceManage/ ...
分类:
其他好文 时间:
2018-01-30 21:13:40
阅读次数:
191
前言 redis数据存储在内存中, 就会受到内存的限制, 大家都知道, 一台电脑, 硬盘可以有1T, 但是内存, 没有听说有1T的内存吧. 那如果数据非常多, 超过一台电脑的内存空间, 怎么办呢? 正常思维, 都是, 一台电脑不够, 那我再加一台电脑嘛, 不就够了. redis集群架构图 每一台re ...
分类:
其他好文 时间:
2018-01-29 21:29:25
阅读次数:
225
先有鸡还是先有蛋? 最近有朋友问了一个问题,说毕业后去大城市还是小城市?去大公司还是小公司?我的回答都是大城市!大公司!为什么这么说呢,你想一下,无论女孩男孩找朋友都喜欢找个子高胸大的。同样的道理嘛,「大」总有大的好。当然,如果你要有能力找一个胸大个子高就更完美了。 Redis 集群简介 Redis ...
分类:
其他好文 时间:
2018-01-27 20:16:58
阅读次数:
128
转:http://www.cnblogs.com/Orgliny/p/5526159.html 1、zookeeper搭建 Kafka集群依赖zookeeper,需要提前搭建好zookeeper zookeeper快速搭建推荐地址:http://nileader.blog.51cto.com/138 ...
分类:
其他好文 时间:
2018-01-27 13:31:00
阅读次数:
388
1.NFS服务器搭建 2.Docker Swarm集群搭建 角色 IP 服务器版本 Docker版本 manager 192.168.0.201 CentOS 7.3 17.05.0 ce node 192.168.0.202 CentOS 7.3 17.05.0 ce node 192.168.0 ...
分类:
其他好文 时间:
2018-01-26 22:40:32
阅读次数:
1240
本教程使用redis3.0版本。3.0版本主要增加了redis集群功能。 安装的前提条件: 需要安装gcc:yum install gcc-c++ tar -zxvf redis-3.0.0.tar.gz [root@bogon redis-3.0.0]# make install PREFIX=/ ...
分类:
其他好文 时间:
2018-01-26 20:51:38
阅读次数:
166
基于ZooKeeper的Hadoop HA集群搭建
分类:
其他好文 时间:
2018-01-26 11:01:49
阅读次数:
122
1.redis-cluster设计 Redis集群搭建的方式有多种,例如使用zookeeper,但从redis 3.0之后版本支持redis-cluster集群,redis-cluster采用无中心结构,每个节点保存数据和整个集群状态,每个节点都和其他所有节点连接。其redis-cluster架构图 ...
分类:
其他好文 时间:
2018-01-25 13:06:06
阅读次数:
203
介绍安装环境与版本 用两台虚拟机模拟6个节点,一台机器3个节点,创建出3 master、3 salve 环境。 redis 采用 redis-3.2.4 版本。 两台虚拟机都是 CentOS ,一台 CentOS6.5 (IP:192.168.31.245),一台 CentOS7(IP:192.16 ...
分类:
其他好文 时间:
2018-01-24 18:04:13
阅读次数:
2917
Hadoop 集群搭建目录集群简介服务器准备环境和服务器设置JDK环境安装Hadoop安装部署启动集群测试集群简介在进行集群搭建前,我们需要大概知道搭建的集群都是些啥玩意。HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者在逻辑上分离,但物理上常在一起(啥意思?就是说:HDFS集群和YARN集群,他们俩是两个不同的玩意,但很多时候都会部署在同一台物理机器上)HDFS集群:负责海
分类:
其他好文 时间:
2018-01-24 14:04:37
阅读次数:
167