负载均衡技术对于一个网站尤其是大型网站的web服务器集群来说是至关重要的!做好负载均衡架构,可以实现故障转移和高可用环境,避免单点故障,保证网站健康持续运行。由于业务扩展,网站的访问量不断加大,负载越来越高。现需要在web前端放置nginx负载均衡,同时结合keepalived对前端nginx实现HA高可用。介绍下Nginx和keepalive1.NginxNginx是一个很强大的高性能Web和反
分类:
其他好文 时间:
2018-06-05 17:46:45
阅读次数:
153
hadoop2.5.0 HA配置 1.修改hadoop中的配置文件 进入/usr/local/src/hadoop 2.5.0 cdh5.3.6/etc/hadoop目录,修改hadoop env.sh,core site.xml,hdfs site.xml,mapred site.xml ,yar ...
分类:
其他好文 时间:
2018-05-06 19:59:57
阅读次数:
169
join: Map端join //大表+小表,只需要map Reduce端join //大表+大表,需要Map和Reduce //设计组合key和flag //分组对比器 Json: fastJson技术 JSON.parseObject(str) //将string转成jsonObject ... ...
分类:
Web程序 时间:
2018-04-25 16:59:09
阅读次数:
222
在Hadoop 2.0.0之前,一个Hadoop集群只有一个NameNode,那么NameNode就会存在单点故障的问题,幸运的是Hadoop 2.0.0之后解决了这个问题,即支持NameNode的HA高可用,NameNode的高可用是通过集群中冗余两个NameNode,并且这两个NameNode分... ...
分类:
其他好文 时间:
2018-04-14 13:58:41
阅读次数:
200
keepalived的作用:主要用作RealServer的健康状态检查以及LoadBalance主机和BackUP主机之间failover的实现。使用keepalived软件部署网站HA集群: 能够实现任意单故障节点的高可用集群一、前期准备1、在两台网站服务器上安装keepalived软件(4.51,4.52)2、查看配置的路径: rpm -qc keepaliv
分类:
其他好文 时间:
2018-03-15 11:54:59
阅读次数:
179
集群分为LB负载均衡集群,HA高可用集群,LB高应用集群。 前两种比较常见 LB是更加注重性能处理速度,而HA注重是服务器的在线时间。 HA集群一般设有主重,当主服务器当掉时候,重服务器进行工作,此时ip会飘到重服务器上,这里出现脑裂问题 LB负载均衡集群: 在前端有一台调度器director通过调 ...
分类:
其他好文 时间:
2018-03-01 00:32:12
阅读次数:
153
LINUX集群&存储集群LB:负载均衡:HA:高可用集群:HPC:高性能计算集群,多用于航天技术,天文探测,存储(共享存储)iscsiNFSFastDFS【什么是集群】:一组通过高速网络互联的计算组,以单一系统模式进行管理,且这个群集都提供同一种服务,在付出较低成本的情况下,获得在性能,可靠性,灵活性方面,相对较高的收益调度器是集群系统中的核心技术【集群的目的】:1、提高性能2、降低成本3
分类:
其他好文 时间:
2018-02-27 17:49:11
阅读次数:
220
集群基础1.服务器硬件性能不足,策略:1.scaleon向上扩展加大cpu内存等硬件-----------这种方式不可能无限扩展,而且到一定程度,性能可能会下降2.scaleout向外扩展------------------多台服务器对外提供服务--------------------目前使用的方法cluster1.LB负载均衡提高并发处理能力2.HA高可用集群提升服务可用性在线时间/(在线时间+
分类:
其他好文 时间:
2018-01-21 11:06:17
阅读次数:
169