假设Spark的部署方式选择Standalone。一个採用Master/Slaves的典型架构。那么Master是有SPOF(单点故障,Single Point of Failure)。Spark能够选用ZooKeeper来实现HA。 ZooKeeper提供了一个Leader Election机制, ...
分类:
其他好文 时间:
2017-06-10 12:22:02
阅读次数:
240
官方vsphere6.5文档中心镇楼:http://pubs.vmware.com/vsphere-65/index.jsp#com.vmware.vsphere.avail.doc/GUID-4A626993-A829-495C-9659-F64BA8B560BD.htmlvCenterHighAvailability(vCenterHA)可防止vCenterServerAppliance发生主机和硬件故障。修补vCenterServerAppliance时..
分类:
其他好文 时间:
2017-06-09 17:26:04
阅读次数:
1393
如果Hadoop开启HA,那么用Java Client连接Hive的时候,需要指定一些额外的参数 ...
分类:
编程语言 时间:
2017-06-09 15:24:20
阅读次数:
305
菜鸟玩云计算之十八:Hadoop 2.5.0 HA 集群安装第1章cheungmine, 2014-10-250 引言在生产环境上安装Hadoop高可用集群一直是一个须要极度耐心和体力的仔细工作。虽然有非常多文档教会大家怎么一步一步去完毕这样的工作,可是百密也有一疏。现成的工具不是没有,可是对于我这 ...
分类:
其他好文 时间:
2017-06-09 13:25:05
阅读次数:
228
Keepalived详解:提供HA的底层工具。严重依赖于脚本实现其扩展功能的HA服务。早期是为ipvs提供ha功能的HA-->>Ipvs(规则)提供VIP在集群之间的流转作用(这个依赖的基础是vrrp)Keepalived有三个模块:core,check,vrrpCore模块:是keepalived模块的核心模块,负责出进..
分类:
其他好文 时间:
2017-06-08 10:49:58
阅读次数:
168
HDFS简单介绍 声明:本文是本人基于Hadoop权威指南学习的一些个人理解和笔记,仅供学习參考。有什么不到之处还望指出,一起学习一起进步。 转载请注明:http://blog.csdn.net/my_acm Hadoop说白了就是一个提供了处理分析大数据的文件集群,当中最重要的无疑是HDFS(Ha ...
分类:
其他好文 时间:
2017-06-07 18:43:06
阅读次数:
199
JAVA中为我们提供了丰富的加密技术。能够主要的分为单向加密和非对称加密 1.单向加密算法 单向加密算法主要用来验证传输数据的过程中。是否被篡改过。BASE64 严格地说,属于编码格式。而非加密算法MD5(Message Digest algorithm 5,信息摘要算法)SHA(Secure Ha ...
分类:
编程语言 时间:
2017-06-07 17:05:06
阅读次数:
179
一、环境准备:HA架构至少需要一主一从1.1、主机规划: master端:192.168.56.11 slave端:192.168.56.12 1.2、安装redis环境两台机器分别安装redis3.2.8安装步骤如下: cd /usr/local/ wget http://download.red ...
分类:
其他好文 时间:
2017-06-07 12:44:32
阅读次数:
290
内存子系统及常用调优参数内存子系统组件slaballocatorbuddysystemkswapdpdflushmmu虚拟化环境:PA(进程地址)-->HA(虚拟机地址)-->MA(物理机地址)虚拟机转换:PA-->HAguestOS虚拟机内核,OS物理机内核shadowPTMemory:TLB:提升性能HugePages内存大页面[root@localho..
分类:
系统相关 时间:
2017-06-06 18:51:59
阅读次数:
386
Kubernetes Scheduler作用是将Controller Manager将要新建的Pod按照特定的调度算法和调度策略绑定到集群中某个合适的Node上,并将绑定信息写入到etcd中。 一、部署Scheduler 下面生成kube-scheduler的kubeconfig文件,操作如下: 配 ...
分类:
Web程序 时间:
2017-06-05 23:56:12
阅读次数:
1526