Hadoop配置-JDK的安装 总体目标:完成zookeeper+Hadoop+Hbase 整合平台搭建 进度:1:集群网络属性配置2:集群免密码登陆配置3:JDK的安装4:Zookeeper的安装5:Hadoop普通集群模式的安装6:Hbase普通模式的安装7:Hadoop HA集群模式的安装 8 ...
分类:
其他好文 时间:
2018-05-15 10:36:24
阅读次数:
189
一、下载Spark安装包 1、从官网下载 http://spark.apache.org/downloads.html 2、从微软的镜像站下载 http://mirrors.hust.edu.cn/apache/ 3、从清华的镜像站下载 https://mirrors.tuna.tsinghua.e ...
分类:
其他好文 时间:
2018-04-20 22:00:16
阅读次数:
634
导读:众所周知,K8S安装难点在于镜像下载。查询网上许多关于K8S安装部署的文章,作者要么是将镜像下载使用的工作交给了读者完成,要么是放在共享云盘中,由读者下载后导入使用。都知道,如果你不是该云盘提供商的会员,镜像下载速度堪比蜗牛。总之,三个字:”不方便“。基于最大化便利刚接触K8S的同行快速上手实践的目的,在参阅了众多同行关于K8S部署的文章,并经过反复实验验证后,将本人的实验成果在这里分享,希
分类:
Web程序 时间:
2018-04-02 15:59:18
阅读次数:
423
概述: 根据功能划分为两大类:高可用和负载均衡 高可用集群(HA集群或者叫双机热备)通常为两台服务器,一台工作,另外一台作为冗余,当提供服务的机器宕机,冗余将接替继续提供服务;实现高可用的开源软件有:heartbeat、keepalived 负载均衡集群,需要有
分类:
系统相关 时间:
2018-04-01 13:08:49
阅读次数:
185
keepalived的作用:主要用作RealServer的健康状态检查以及LoadBalance主机和BackUP主机之间failover的实现。使用keepalived软件部署网站HA集群: 能够实现任意单故障节点的高可用集群一、前期准备1、在两台网站服务器上安装keepalived软件(4.51,4.52)2、查看配置的路径: rpm -qc keepaliv
分类:
其他好文 时间:
2018-03-15 11:54:59
阅读次数:
179
理论上,生产环境的OpenStack集群尽量不要关闭,但由于某些原因你肯定会遇到需要关闭整个集群的,如计划中的机房断电,版本升级等。特别是物理断电要特别谨慎,因为回导致磁盘故障,以及数据状态的混乱,从而导致各类问题的出现。我经常遇到的问题是,当物理断电后,mariadb galera 启动失败,这个组件可是核心组件,数据库起不来,那么整个openstack集群就停摆了。
分类:
其他好文 时间:
2018-03-13 12:15:10
阅读次数:
346
集群分为LB负载均衡集群,HA高可用集群,LB高应用集群。 前两种比较常见 LB是更加注重性能处理速度,而HA注重是服务器的在线时间。 HA集群一般设有主重,当主服务器当掉时候,重服务器进行工作,此时ip会飘到重服务器上,这里出现脑裂问题 LB负载均衡集群: 在前端有一台调度器director通过调 ...
分类:
其他好文 时间:
2018-03-01 00:32:12
阅读次数:
153
1、安装CentOS 7.3操作系统mini版本即可 2、设置关闭Selinux *编辑 /etc/selinux/config vi /etc/selinux/config SELINUX=disabled *重启机器,查看selinux状态 sestatus # SELinux status: ...
分类:
其他好文 时间:
2018-02-23 14:46:11
阅读次数:
187
集群介绍根据功能划分为两大类:高可用和负载均衡高可用集群,即“HA"集群,也常称作“双机热备”,用于关键业务。核心原理都是通过心跳线连接两台服务器,一台用于提供服务,另外一台作为冗余,当提供服务的机器宕机,冗余将接替继续提供服务,实现高可用的开源软件有:heartbeat、keepalived。负载均衡集群,需要有一台服务器作为分发器,它负责把用户的请求分发给后端的服务器处理,在这个集群
分类:
其他好文 时间:
2018-01-26 17:07:30
阅读次数:
202
基于ZooKeeper的Hadoop HA集群搭建
分类:
其他好文 时间:
2018-01-26 11:01:49
阅读次数:
122