最近公司主力网站之一改版完成终于上线了,牵扯了我大半年的时间,现在终于有时间坐下来写点东西,总结沉淀一下自己的技术心得。此次,根据服务器的数量和质量,我采用负载均衡高冗余的架构,考虑单点故障,WEB也抛弃了apache,而使用的是nginx,数据库还是使用主、从架构。该..
分类:
Web程序 时间:
2015-02-10 18:58:17
阅读次数:
334
一、MySQL Cluster概述MySQL Cluster 是一种技术,该技术允许在无共享的系统中部署“内存中”数据库的 Cluster 。通过无共享体系结构,系统能够使用廉价的硬件,而且对软硬件无特殊要求。此外,由于每个组件有自己的内存和磁盘,不存在单点故障。MySQL Cluster 由一组计...
分类:
数据库 时间:
2015-02-04 23:07:03
阅读次数:
152
1、clover分布式调度介绍 clover分布式任务调度是完全使用Java技术自主开发 特点如下: 1、防单点故障 2、job可部署多台,但任务调度时,只有一台参执行。如果一台下线, clover选择其他已在zookeeper注册job来执行...
分类:
其他好文 时间:
2015-02-04 16:57:05
阅读次数:
269
1、clover分布式调度介绍
clover分布式任务调度是完全使用Java技术自主开发
特点如下:
1、防单点故障
2、job
可部署多台,但任务调度时,只有一台参执行。如果一台下线,
clover选择其他已在zookeeper注册job来执行。
3、可管理监控程序 ,相关负责人的job不可用会发送邮件通知
4、提供管理后台,可手动...
分类:
其他好文 时间:
2015-02-03 15:04:04
阅读次数:
284
Hadoop 平台优化
1. 概述
随着企业要处理的数据量越来越大,MapReduce思想越来越受到重视。Hadoop是MapReduce的一个开源实现,由于其良好的扩展性和容错性,已得到越来越广泛的应用。Hadoop作为一个基础数据处理平台,虽然其应用价值已得到大家认可,但仍存在很多问题,以下是主要几个:
(1) Namenode/jobtracker单点故障。 Hadoo...
分类:
其他好文 时间:
2015-01-24 14:33:15
阅读次数:
172
keepalived起初是为LVS设计的,专门用来监控LVS集群系统中各个real server的健康状况的,后来又在其中实现了VRRP协议,VRRP即virtual router redundancy protocol(虚拟路由器冗余协议)的缩写,VRRP的目的是为了解决静态路由出现的单点故障问题...
分类:
其他好文 时间:
2015-01-23 22:58:20
阅读次数:
394
在上一节中我们写了Redis的数据持久化
http://blog.csdn.net/wtyvhreal/article/details/42916503
通过持久化功能,Redis保证了即使在服务器重启的情况下也不会损失(或少量损失)数据。但是由于数据是存储在一台服务器上的,如果这台服务器的硬盘出现故障,也会导致数据丢失。为了避免单点故障,我们希望将数据库复制多个副本以部署在...
分类:
其他好文 时间:
2015-01-21 22:31:36
阅读次数:
242
方案优势:Galera能够实现MySQL/MariaDB数据库的主主复制和多主复制等模式,这些复制模式都是同步进行的,同步时间非常短每一个节点都可以同时写入和读取,当某一节点发生故障时,可自动从集群中自动剔除HAProxy能提供负载均衡和故障判断等功能解决服务器系统存在的单点故障Kee..
分类:
数据库 时间:
2015-01-14 18:13:09
阅读次数:
1002
Sheepdog,是由NTT的3名日本研究员开发的开源项目,主要用来为虚拟机提供块设备。其架构例如以下:以下,我们将从架构、模块等几个方面来介绍下:一、架构图如上图:採用无中心节点的全对称架构,无单点故障,存储容量和性能可线性扩展;新增节点通过简单配置可自己主动增加(IP:PORT),数据自己主动实...
分类:
其他好文 时间:
2015-01-14 16:44:13
阅读次数:
131
共享文件系统以及NFS数据同步
1、单个NFS的缺点
一般情况下,当nfs客户端数目较小的时候,NFS性能不会出现问题;一旦NFS服务器数目过多,并且是那种读写都比较频繁的操作,所得到的结果就不是我们所期待的。
单个NFS这种架构除了性能问题而外,还存在单点故障,一旦这个NFS服务器发生故障,所有靠共享提供数据的应用就不再可用,可以考虑用rsync方式同步数据到另外一个服务器上做nfs服务的...
分类:
其他好文 时间:
2015-01-12 14:46:10
阅读次数:
185