nfs存在单点故障问题。ceph刚好解决了这个问题。 一、安装环境准备准备三台机器,每台机器需要三个硬盘,配置2GiB/4vCPU/60G192.168.0.11 master1-admin192.168.0.12 node1-monitor192.168.0.13 node2-osd 二、初始化机 ...
分类:
其他好文 时间:
2020-05-21 00:28:35
阅读次数:
106
一.Hadoop社区版和发行版 社区版:我们把Apache社区一直开发的Hadoop称为社区版。简单的说就是Apache Hadoophttp://hadoop.apache.org/ 发行版:基于Apache Hadoop的基础上进行商业改造的解决方案,包含一系列定制的管理工具和软件。 二.Had ...
分类:
其他好文 时间:
2020-05-20 18:35:44
阅读次数:
59
1 介绍 1.1 概念 面向批处理的分布式计算框架 一种编程模型:MapReduce程序被分为Map(映射)阶段和Reduce(化简)阶段 1.2 核心思想 分而治之,并行计算 移动计算,而非移动数据 1.3 特点 计算跟着数据走 良好的扩展性:计算能力随着节点数增加,近似线性递增 高容错 状态监控 ...
分类:
其他好文 时间:
2020-05-07 00:30:19
阅读次数:
80
[toc] 高可用分布式对象存储,MinIO 轻松实现。 1 前言 "上一篇文章" 介绍了使用对象存储工具 MinIO 搭建一个优雅、简单、功能完备的静态资源服务,可见其操作简单,功能完备。但由于是单节点部署,难免会出现单点故障,无法做到服务的高可用。MinIO 已经提供了分布式部署的解决方案,实现 ...
分类:
其他好文 时间:
2020-05-01 00:59:14
阅读次数:
280
一、说明 在架构设计中,可以利用NGINX的反向代理和负载均衡实现后端应用的高可用性,同时我们还需要考虑Nginx的单点故障。真正做到架构高可用性。 主要考虑以下几点: 1、Nginx服务因为意外现象挂掉 2、服务器宕机导致NGINX不可用 二、环境准备 # 准备四台机器,两台nginx主备,两台w ...
分类:
其他好文 时间:
2020-04-25 23:39:30
阅读次数:
79
Redis 是一个开源的 key-value 存储系统,由于出众的性能,大部分互联网企业都用来做服务器端缓存。Redis 在3.0版本前只支持单实例模式,虽然支持主从模式、哨兵模式部署来解决单点故障,但是现在互联网企业动辄大几百G的数据,可完全是没法满足业务的需求,所以,Redis 在 3.0 版本 ...
分类:
其他好文 时间:
2020-04-08 19:17:30
阅读次数:
85
先提一下双机热备份,两台机器分为主从,主承担流量,从负责监控,出现故障时顶上去,之后就有了VRRP(虚拟路由冗余协议),可以把多台设备联合组成一台虚拟的路由设备,将虚拟路由设备的IP地址作为用户的默认网关实现与外部网络的通信。当网关出现单点故障时,VRRP机制能够选举新的网关设备,从而提高网络的可靠 ...
分类:
其他好文 时间:
2020-04-06 20:51:18
阅读次数:
99
(1)Hadoop1.x和2.x之间的区别 Hadoop 1.0内核主要由两个分支组成:MapReduce和HDFS,在高可用、扩展性等方面存在问题 1)HDFS存在的问题 1.NameNode单点故障,难以应用于在线场景。 2.NameNode压力过大,且内存受限,影响扩展性。 2)MapRedu ...
分类:
其他好文 时间:
2020-03-28 17:42:52
阅读次数:
69
为了避免单点故障,Eureka注册中心会有集群,配置的时候只需要相互注册即可 例如三个服务器 一: server: port: 8080 # 端口spring: application: name: eureka-server # 应用名称,会在Eureka中显示,集群时名称一致eureka: cl ...
分类:
其他好文 时间:
2020-03-27 12:44:56
阅读次数:
59
前言 首先介绍一下Keepalived,它是一个高性能的服务器高可用或热备解决方案,起初是专为LVS负载均衡软件设计的,Keepalived主要来防止服务器单点故障的发生问题,可以通过其与Nginx的配合实现web服务端的高可用。 Keepalived以VRRP协议为实现基础,VRRP是Virtua ...
分类:
其他好文 时间:
2020-03-26 01:15:50
阅读次数:
71