如何保证数据写入过程中不丢 数据写入请求达到时，以需要的数据格式组织并写入磁盘的过程叫做数据提交，对应es就是创建倒排索引，维护segment文件 如果我们同步的方式，来处理上述过程，那么系统的吞吐量将很低 如果我们以异步的方式，先写入内存，然后再异步提交到磁盘，则有可能因为机器故障而而丢失还未写入 ...
分类：
其他好文 时间：
2021-02-01 12:49:08
阅读次数：
0
从 Docker 迁移到 Docker Swarm，再到 Kubernetes，然后处理了多年来的所有各种 API 更改之后，我非常乐意发现部署中出现的问题和把问题进行修复。 我今天分享下我认为最有用的5条故障排除技巧，以及一些其他的使用技巧。 kubectl –“瑞士军刀” kubectl 就是我 ...
分类：
Web程序 时间：
2021-01-30 12:00:52
阅读次数：
0
1. 问题截图 解决方法 sudo su root 解决问题截图 ...
分类：
其他好文 时间：
2021-01-29 11:56:29
阅读次数：
0
Checkpoint介绍 checkpoint机制是Flink可靠性的基石，可以保证Flink集群在某个算子因为某些原因(如 异常退出)出现故障时，能够将整个应用流图的状态恢复到故障之前的某一状态，保 证应用流图状态的一致性。Flink的checkpoint机制原理来自“Chandy-Lamport ...
分类：
其他好文 时间：
2021-01-28 12:03:40
阅读次数：
0
引言 在 K8s 集群运营过程中，常常会被节点 CPU 和内存的高使用率所困扰，既影响了节点上 Pod 的稳定运行，也会增加节点故障的几率。为了应对集群节点高负载的问题，平衡各个节点之间的资源使用率，应该基于节点的实际资源利用率监控信息，从以下两个策略入手： 在 Pod 调度阶段，应当优先将 Pod ...
分类：
其他好文 时间：
2021-01-27 13:03:58
阅读次数：
0
在发生故障切换后，经常遇到的问题就是同步报错，数据库很小的时候，dump完再导入很简单就处理好了，但线上的数据库都150G-200G，如果用单纯的这种方法，成本太高，故经过一段时间的摸索，总结了几种处理方法。生产环境架构图目前现网的架构，保存着两份数据，通过异步复制做的高可用集群，两台机器提供对外服 ...
分类：
数据库 时间：
2021-01-26 12:44:04
阅读次数：
0
动态路由 基于某种路由协议实现 动态路由特点 1、减少了管理任务 2、占用了网络带宽 收敛：使所有路由表都达到一致状态的过程，收敛速度就决定故障率更低，响应更快 网络中静态路由和动态路由互相补充 按照路由执行的算法分为两类： 距离矢量路由协议 依据从源网络到目标网络所经过的路由器的个数选择路由 RI ...
分类：
其他好文 时间：
2021-01-21 10:58:00
阅读次数：
0
原文： https://www.cnblogs.com/lijiaman/p/13893346.html (一)多路径管理软件的由来在企业中，服务器与存储通常是分开放置的，服务器上的硬盘通常用来安装操作系统和应用软件，业务数据则是存储在单独的存储设备上，那么，服务器与存储是如何连接的呢？根据存储协议 ...
分类：
系统相关 时间：
2021-01-21 10:36:32
阅读次数：
0
1 简介 MHA（Master High Availability）目前在MySQL高可用方面是一个相对成熟的解决方案，它由日本DeNA公司youshimaton（现就职于Facebook公司）开发，是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中， ...
分类：
数据库 时间：
2021-01-16 12:14:21
阅读次数：
0
解决Hadoop HA集群 NameNode 无法自动故障转移（切换active） 在学习 HA 自动化配置，按照hadoop官网:https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HDFSHighAvaila ...
分类：
其他好文 时间：
2021-01-15 12:13:12
阅读次数：
0
