在单点或者少数节点故障的情况下，集群还可以正常的提供服务，HDFS高可用机制可以通过配置Active/Standby两个NameNodes节点实现在集群中对NameNode的热备来消除单节点故障问题，如果单个节点出现故障，可通过该方式将NameNode快速切换到另外一个节点上。
分类：
其他好文 时间：
2020-10-29 09:35:04
阅读次数：
15
如果确定主库确实是无法重启了，那么就最快进行切库操作： 1、快速确定主库有哪些直接从库； 2、快速确定这些从库所在机房和同步位点，作用是：确定谁能作为最佳新主库（同机房且同步旧主库最多的数据的实例）； 3、确定好新主库后，就开始变更集群架构，将其余机器change到新主库（change的时候，注意集 ...
分类：
数据库 时间：
2020-10-27 11:40:37
阅读次数：
33
配置集群 配置yarn-env.sh Linux系统中获取JDK的安装路径 [xiaoran@hadoop101 hadoop-2.7.2]$ echo $JAVA_HOME /opt/module/jdk1.8.0_144 修改JAVA_HOME路径 [xiaoran@hadoop101 hado ...
分类：
其他好文 时间：
2020-10-27 11:36:17
阅读次数：
28
Hadoop基础之环境搭建 环境搭建 本地环境 可以用于开发的单节点模式，没有分布式的概念 伪分布式环境 一个节点表示一整个集群，但是分布式的概念，一个节点充当分布式里的所有角色 完全分布式 一个集群中有N个节点，他们分别充当分布式中不同的角色，完成不同的任务 伪分布式环境搭建 下载安装包 Hado ...
分类：
其他好文 时间：
2020-10-26 11:17:07
阅读次数：
16
概述本文介绍如何利用腾讯云容器服务TKE的日志功能对日志进行采集、存储与查询，分析各种功能用法与场景，给出一些最佳实践建议。注:本文仅适用于TKE集群。如何快速上手?TKE的日志功能入口在集群运维-日志规则，更多关于如何为TKE集群启用日志采集与基础用法，参考官方文档日志采集。技术架构是怎样的?TKE集群开启日志采集后，tke-log-agent作为DaemonSet部署在每个节点上，负责根据采集
分类：
其他好文 时间：
2020-10-24 11:45:15
阅读次数：
27
一、Rook、ceph简介Ceph分布式存储系统Ceph是一种高度可扩展的分布式存储解决方案，提供对象、文件和块存储。在每个存储节点上，您将找到Ceph存储对象的文件系统和CephOSD（对象存储守护程序）进程。在Ceph集群上，您还可以找到CephMON（监控）守护程序，它们确保Ceph集群保持高可用性。RookRook是一个开源的cloud-nativestorage编排,提供平台和框架；为各
分类：
其他好文 时间：
2020-10-24 11:43:42
阅读次数：
23
简介Linux持续不断进军可扩展计算空间，特别是可扩展存储空间，Ceph最近加入到Linux中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护POSIX兼容性的同时加入了复制和容错功能Ceph生态系统架构可以划分为四部分：1、Clients：客户端（数据用户）2、cmds：Metadataservercluster，元数据服务器（缓存和同步分布式元数据）3、cosd：Object
分类：
其他好文 时间：
2020-10-22 23:13:23
阅读次数：
52
在kubernetes集群中，每个Node节点都会启动kubelet进程，用来处理Master节点下发到本节点的任务，管理Pod和其中的容器。kubelet会在API Server上注册节点信息，定期向Master汇报节点资源使用情况，并通过cAdvisor监控容器和节点资源。可以把kubelet理 ...
分类：
其他好文 时间：
2020-10-22 23:06:45
阅读次数：
49
Redis是一个高性能的key-value存储系统，被广泛用于微服务架构中。如果我们想要使用Redis集群模式提供的高级特性，则需要对客户端代码进行改动，这带来了应用升级和维护的一些困难。利用Istio和Envoy，我们可以在不修改客户端代码的前提下实现客户端无感知的RedisCluster数据分片，并提供读写分离、流量镜像等高级流量管理功能。RedisClusterRedis的一个常见用途是用作
分类：
其他好文 时间：
2020-10-22 22:59:55
阅读次数：
22
Redis 是一个高性能的 key-value 存储系统，被广泛用于微服务架构中。如果我们想要使用 Redis 集群模式提供的高级特性，则需要对客户端代码进行改动，这带来了应用升级和维护的一些困难。利用 Istio 和 Envoy ，我们可以在不修改客户端代码的前提下实现客户端无感知的 Redis ...
分类：
其他好文 时间：
2020-10-22 22:37:49
阅读次数：
19
