一、Hadoop1.0到2.0的架构变化1、Hadoop2.0由HDFS、MapReduce和YARN三个分支构成2、HDFSNNFederation、HA3、MapReduce运行在YARN上的MR4、YARN资源管理系统二、HDFS2.01、解决HDFS1.0中单点故障和内存受限问题。2、解决单点故障HDFSHA通过主备NameNode解决如果主NameNode发生故..
分类:
其他好文 时间:
2015-03-21 21:29:17
阅读次数:
356
一、JVM调优基本流程
1、划分应用程序的系统需求优先级
2、选择JVM部署模式:单JVM、多JVM
3、选择JVM运行模式
4、调优应用程序内存使用
5、调优应用程序延迟
6、调优应用程序吞吐量
二、选择JVM部署模式:单JVM、多JVM
1、单JVM
优点:不需要管理多个JVM,降低管理成本; 应用程序消耗内存数量较少
缺点:存在单点故障,一个JVM失效时,整个系统...
分类:
其他好文 时间:
2015-03-14 11:07:26
阅读次数:
153
分布式缓存出于如下考虑,首先是缓存本身的水平线性扩展问题,其次是缓存大并发下的本身的性能问题,再次避免缓存的单点故障问题(多副本和副本一致性)。分布式缓存的核心技术包括首先是内存本身的管理问题,包括了内存的分配,管理和回收机制。其次是分布式管理和分布式算法,其次是缓存键值管理和路由。原文:http:...
分类:
系统相关 时间:
2015-03-10 01:19:39
阅读次数:
161
LVS集群:开源免费,具有高可用性,高稳定性,高可靠性高可用性:lvs的负载均衡集群具有很高的处理能力,realserver组中的某台node节点出问题了,不会影响整个集群的正常工作;而且具有超高负荷的服务能力,可支持上百万个并发连接数缺点:在LB上容易出现单点故障,若只有一台L..
分类:
其他好文 时间:
2015-03-04 19:29:43
阅读次数:
116
分布式缓存出于如下考虑,首先是缓存本身的水平线性扩展问题,其次是缓存大并发下的本身的性能问题,再次避免缓存的单点故障问题(多副本和副本一致性)。分布式缓存的核心技术包括首先是内存本身的管理问题,包括了...
分类:
系统相关 时间:
2015-03-02 11:31:59
阅读次数:
220
安装环境:
source:
OS:redhat 6.3
DB:11.2.0.4 rac
OGG:11.2.1.0.1
target:
OS:redhat 6.3
DB:11.2.0.4
OGG:11.2.1.0.1
rac到单机的一个传输配置,这里测试ogg没有放入到共享存储中。建议生产环境将ogg放入共享存储,以免单点故障。
Prepare(Source And Target...
分类:
数据库 时间:
2015-03-02 09:30:47
阅读次数:
251
本文讲解了Storm故障容忍性(Fault-Tolerance)的设计细节:当Worker、节点、Nimbus或者Supervisor出现故障时是如何实现故障容忍性,以及Nimbus是否存在单点故障问题。...
分类:
其他好文 时间:
2015-02-17 17:40:45
阅读次数:
128
最近公司主力网站之一改版完成终于上线了,牵扯了我大半年的时间,现在终于有时间坐下来写点东西,总结沉淀一下自己的技术心得。此次,根据服务器的数量和质量,我采用负载均衡高冗余的架构,考虑单点故障,WEB也抛弃了apache,而使用的是nginx,数据库还是使用主、从架构。该架构目前承载80W的PV,没有...
分类:
Web程序 时间:
2015-02-14 22:31:32
阅读次数:
254
一、现状分析公司在域环境下部署了一台Exchange2010邮箱服务器,提供公司的内部和外部的邮件通信。单台邮件服务器目前能满足公司的业务需求,但是存在单点故障隐患。如若邮件服务器故障将会对公司的邮件通信业务造成严重打击,同时随着公司业务的发展用户数量也在逐步增加。所..
分类:
其他好文 时间:
2015-02-14 01:22:56
阅读次数:
318
最近公司主力网站之一改版完成终于上线了,牵扯了我大半年的时间,现在终于有时间坐下来写点东西,总结沉淀一下自己的技术心得。此次,根据服务器的数量和质量,我采用负载均衡高冗余的架构,考虑单点故障,WEB也抛弃了apache,而使用的是nginx,数据库还是使用主、从架构。该架构目前承载80W的PV,没....
分类:
Web程序 时间:
2015-02-13 16:05:28
阅读次数:
159