1、本章内容集群概念LVS介绍LVS实现ldirectord2、Cluster概念系统扩展方式:ScaleUP:向上扩展,增强,价格高昂ScaleOut:向外扩展,增加设备,调度分配问题,ClusterCluster:集群,为解决某个特定问题将多台计算机组合起来形成的单个系统LinuxCluster类型:LB:LoadBalancing,负载均衡每个机器提供一部分访问量,能者多劳LVS实现HA:H
分类:
其他好文 时间:
2018-06-08 15:53:56
阅读次数:
175
1、Proxmox proxmox是一个开源的虚拟化管理平台,支持集群管理和HA.在存储方面,proxmox除了支持常用的lvm,nfs,iscsi,还支持集群存储glusterfs和ceph,这也是我们选择它的原因.官方网站http://www.proxmox.com。 Proxmox VE (P ...
分类:
Web程序 时间:
2018-06-06 15:28:26
阅读次数:
932
负载均衡技术对于一个网站尤其是大型网站的web服务器集群来说是至关重要的!做好负载均衡架构,可以实现故障转移和高可用环境,避免单点故障,保证网站健康持续运行。由于业务扩展,网站的访问量不断加大,负载越来越高。现需要在web前端放置nginx负载均衡,同时结合keepalived对前端nginx实现HA高可用。介绍下Nginx和keepalive1.NginxNginx是一个很强大的高性能Web和反
分类:
其他好文 时间:
2018-06-05 17:46:45
阅读次数:
153
安装Spark需要先安装jdk及安装Scala。 1. 创建目录 > mkdir /opt/spark > cd /opt/spark 2. 解压缩、创建软连接 > tar zxvf spark-2.3.0-bin-hadoop2.7.tgz > link -s spark-2.3.0-bin-ha ...
分类:
系统相关 时间:
2018-06-05 00:36:58
阅读次数:
291
报错: 无明显报错 状况: 所有namenode都是standby,即ZK服务未生效 尝试一:手动强制转化某个namenode为active 操作:在某台namenode上,执行 hdfs haadmin -transitionToActive --forcemanual nn1 (nn1是你的某台 ...
分类:
数据库 时间:
2018-05-31 19:36:59
阅读次数:
232
报错:在journalnode的log中: org.apache.hadoop.hdfs.qjournal.protocol.JournalNotFormattedException: Journal Storage Directory /mnt/data1/hadoop/dfs/journal/h ...
分类:
Web程序 时间:
2018-05-31 19:32:52
阅读次数:
2536
2. 利用keepalived实现高可靠配置(HA) 2.1. 高可靠概念 HA(High Available):高可用性集群,是保证业务连续性的有效解决方案,一般有两个或两个以上的节点,且分为活动节点及备用节点。 2.2. 高可靠软件keepalived keepalive是一款可以实现高可靠的软 ...
分类:
其他好文 时间:
2018-05-29 20:34:53
阅读次数:
224
ubuntu支持多用户登入的,所以掌握多用户创建的技巧可以节省很多事情 useradd 具体的做法就看man adduser 1、创建用户,-m表示同时创建用户家目录 sudo useradd -m hadoop 2、为创建的hadoop用户设置密码 sudo passwd hadoop 3、为ha ...
分类:
系统相关 时间:
2018-05-27 23:40:40
阅读次数:
272
一 守护进程 主进程创建子进程,然后将该进程设置成守护自己的进程 关于守护进程需要强调两点: 其一:守护进程会在主进程代码执行结束后就终止 其二:守护进程内无法再开启子进程,否则抛出异常:AssertionError: daemonic processes are not allowed to ha ...
分类:
系统相关 时间:
2018-05-27 19:43:19
阅读次数:
199
Xen是由剑桥大学计算机实验室开发的一个开源项目。是一个直接运行在计算机硬件之上的用以替代操作系统的软件层,它能够在计算机硬件上并发的运行多个客户操作系统(Guest OS)。 一.Xen虚拟化类型 Xen对虚拟机的虚拟化分为两大类,半虚拟化(Paravirtualization)和完全虚拟化(Ha ...
分类:
其他好文 时间:
2018-05-25 21:31:00
阅读次数:
193