伪分布式环境: HA环境checkpoint机制 配置了HA的HDFS中,有active和standby namenode两个namenode节点。他们的内存中保存了一样的集群元数据信息,因为standby namenode已经将集群状态存储在内存中了,所以创建检查点checkpoint的过程只需要 ...
分类:
其他好文 时间:
2019-09-14 22:23:28
阅读次数:
122
[SQL SERVER][HA]数据库镜像#简介 最近刚好有机会建置数据库镜像,这个礼拜自己以演练过好几次,所以今天整个建置过程都还满顺利的,这里记录一下。什么是数据库镜像?数据库镜像会维护主数据库的两份副本,通常这两份副本都位于不同的SQL Server 主机服务器... ...
分类:
数据库 时间:
2019-09-13 13:14:06
阅读次数:
101
一、前提条件 安装了Zookeeper、Hadoop HDFS HA 二、安装Mysql 因为使用量多的是单用户数据库模式,并且数据库使用最多的是mysql 所以在这里选择mysql数据库; 三、Hive安装 启动hive 如果能正常的显示登录到hive的命令行下,就表示安装成功了; ...
分类:
数据库 时间:
2019-09-11 23:57:51
阅读次数:
191
一、环境准备1.集群规划主机名IP角色VIP20.0.20.200master-VIPk8s-master0120.0.20.201masterk8s-master0220.0.20.202masterk8s-master0320.0.20.203masterk8s-node0120.0.20.204nodek8s-node0220.0.20.205nodek8s-node0320.0.20.20
分类:
其他好文 时间:
2019-09-10 09:15:32
阅读次数:
125
HA概述所谓HA(HighAvailable),即高可用(7*24小时不中断服务)实现高可用最关键的策略是消除单点故障,HA严格来说应该分成各个组件的HA机制:HDFS的HA和YARN的HAHadoop2.0之前,在HDFS集群中NameNode存在单点故障(SPOF)NameNode主要在以下两个方面影响HDFS集群NameNode机器发生意外,如宕机,集群将无法使用,直到管理员重启NameNo
分类:
其他好文 时间:
2019-09-09 00:01:51
阅读次数:
119
下图是HDFS的架构: 从上图中可以知道,HDFS包含了NameNode、DataNode以及Client三个角色,当我们的HDFS没有配置HA的时候,那还有一个角色就是SecondaryNameNode,这四个角色都是基于JVM之上的Java进程。既然是Java进程,那我们肯定可以调整这四个角色使 ...
分类:
其他好文 时间:
2019-09-08 20:20:22
阅读次数:
444
虚拟化 虚拟化技术产品 KVM VMware IBM 服务器虚拟化(服务器、存储、系统、网络、软件、桌面) VMware 高可用性(HA) VM系统启动时间+应用启动时间+15秒左右的心跳检测时间。 VMware分布式资源调度(DRS) 虚拟化的优势 虚拟化可以提高 IT 敏捷性、灵活性和可扩展性, ...
分类:
其他好文 时间:
2019-09-04 00:12:47
阅读次数:
142
springmvc的执行流程前端控制器继承自servlet方法我们在dispatcherServlet里找到doService方法进入: this.doDispatch(request, response); 里面是定义一些参数,主要的是: mv = ha.handle(processedReque ...
分类:
编程语言 时间:
2019-09-01 12:48:27
阅读次数:
90
参考: hue的load balance官网: https://www.cloudera.com/documentation/enterprise/6/6.2/topics/hue_use_add_lb.html HA: https://www.cloudera.com/documentation/ ...
分类:
其他好文 时间:
2019-08-31 21:42:19
阅读次数:
153
继续上篇文章解决RabbitMQ消息丢失问题和保证消息可靠性(一) 未完成部分,我们聊聊MQ Server端的高可用和消费端如何保证消息不丢的问题? 回归上篇的内容,我们知道消息从生产端到服务端,为了保证消息不丢,我们必须做哪些事情? 发送端采用Confirm模式,注意Server端没成功通知发送端 ...
分类:
其他好文 时间:
2019-08-31 01:16:47
阅读次数:
211