一、Hadoop HA 机制的学习 1.1、Hadoop 2.X 的架构图 2.x版本中，HDFS架构解决了单点故障问题，即引入双NameNode架构，同时借助共享存储系统来进行元数据的同步，共享存储系统类型一般有几类，如：Shared NAS+NFS、BookKeeper、BackupNode 和 ...
分类：
其他好文 时间：
2018-11-22 16:06:00
阅读次数：
623
附上word文档:https://files.cnblogs.com/files/han-guang-xue/6.01hadoop-zookeeper%E7%9A%84HA%E9%9B%86%E7%BE%A4%E7%9A%84%E6%90%AD%E5%BB%BA.pdf 在搭建过程中出现了各种问题, ...
分类：
其他好文 时间：
2018-11-06 17:45:10
阅读次数：
182
一、HA集群中的相关术语 1.节点（node） 运行HA进程的一个独立主机，称为节点，节点是HA的核心组成部分，每个节点上运行着操作系统和高可用软件服务，在高可用集群中，节点有主次之分，分别称之为主节点/备份节点，没个节点拥有唯一的主机名，并且拥有属于自己的一组资源，例如，磁盘，文件系统，网络地址和 ...
分类：
其他好文 时间：
2018-11-05 23:46:13
阅读次数：
312
Keepalived高可用服务器以及haproxy的负载均衡Keepalive运行原理Keepalived检测每个服务节点状态当服务器节点异常或工作出现故障，keepalived将故障节点从集群从集群系统中踢除故障节点恢复后，自动将其加入使用keepalived软件配置HA集群使用keepalived软件配置HA集群1.提供服务的主机需要装keepalived和web服务yum-yinstallh
分类：
其他好文 时间：
2018-10-11 01:54:02
阅读次数：
250
共享存储在需要将一个 LUN （逻辑单元号）映射给多个节点、为集群提供一个共享的存储卷时，同一个存储 LUN 在各个主机端的 LUNID 必须是相同的。比如： (一) 在为多个 ESX 节点创建一个 VMFS 卷的时候(二) 在双机 HA 集群创建共享存储的时候时间一致性集群模式下，各个节点要协同工... ...
分类：
其他好文 时间：
2018-08-20 15:33:37
阅读次数：
175
一、前言 二、Keepalived 详解 三、环境准备 四、LVS+Keepalived 实现高可用的前端负载均衡器 一、前言 这篇文章是前几篇文章的总结，我们先简单的总结一下我们前面讲解的内容，前面我们讲解了，LVS（负载均衡器）、Heartbeat、Corosync、Pacemaker、Web高 ...
分类：
系统相关 时间：
2018-08-09 18:27:28
阅读次数：
216
HA 集群搭建的难度主要在于配置文件的编写， 心细，心细，心细！ ha模式下，secondary namenode节点不存在... 集群部署节点角色的规划（7节点） server01 namenode zkfcserver02 namenode zkfcserver03 resourcemanage ...
分类：
其他好文 时间：
2018-07-13 22:18:23
阅读次数：
167
生产环境下Hadoop HA集群结合Hbase HA集群环境搭建
分类：
其他好文 时间：
2018-07-08 12:40:40
阅读次数：
158
1. Hadoop的HA机制 前言：正式引入HA机制是从hadoop2.0开始，之前的版本中没有HA机制 1.1. HA的运作机制 （1）hadoop-HA集群运作机制介绍 所谓HA，即高可用（7*24小时不中断服务） 实现高可用最关键的是消除单点故障 hadoop-ha严格来说应该分成各个组件的H ...
分类：
其他好文 时间：
2018-07-02 10:58:29
阅读次数：
236
不多说，直接上干货！ 1、先每台机器的zookeeper启动（bigdata-pro01.kfk.com、bigdata-pro02.kfk.com、bigdata-pro03.kfk.com） 2、启动zkfc（bigdata-pro01.kfk.com上） [kfk@bigdata-pro01 ...
分类：
Web程序 时间：
2018-06-17 16:03:27
阅读次数：
489
