Spark 源码解读（一）SparkContext的初始化之TaskScheduler的启动 TaskScheduler创建完成之后，需要调用start()方法才可以生效，SparkContext的代码如下： _taskScheduler.start() TaskScheduler在启动的时候，实际 ...
分类：
其他好文 时间：
2020-07-14 00:25:58
阅读次数：
81
最近在使用orchestrator的过程中，遭遇了严重的问题。 最初上线的几个月里，raft leader非常稳定。 但随着时间的推移，raft leader 频繁变化的问题就爆发了。 leader的变化，直接原因，就是leader没有按时发送heartbeat，从而触发了选举机制。 第一个怀疑的原 ...
分类：
其他好文 时间：
2020-07-05 00:38:51
阅读次数：
87
注：本文基于MySQL高可用之MHA配置VIPvip配置可以采用两种方式：1、通过keepalived的方式管理虚拟ip的浮动；2、通过脚本方式启动虚拟ip的方式（即不需要keepalived或者heartbeat类似的软件）1、keepalived方式管理虚拟ip#在编译安装Keepalived之前，必须先安装内核开发包kernel-devel以及openssl-devel、popt-devel
分类：
数据库 时间：
2020-07-03 23:24:01
阅读次数：
55
max.poll.interval.ms参数用于指定consumer两次poll的最大时间间隔（默认5分钟），如果超过了该间隔consumer client会主动向coordinator发起LeaveGroup请求，触发rebalance；然后consumer重新发送JoinGroup请求 示例如下 ...
分类：
其他好文 时间：
2020-06-28 22:18:58
阅读次数：
547
前面说过了consumer心跳机制：consumer定期向coordinator发送心跳请求，以表明自己还在线；如果session.timeout.ms内未发送请求，coordinator认为其不可用，然后触发rebalance session.timeout.ms：coordinator感知con ...
分类：
其他好文 时间：
2020-06-28 18:30:22
阅读次数：
193
生产环境中一台mysql主机存在单点故障，所以我们要确保mysql的高可用性，即两台MySQL服务器如果其中有一台MySQL服务器挂掉后，另外一台能立马接替其进行工作。MySQL的高可用方案一般有如下几种：keepalived+双主，MHA，PXC，MMM，Heartbeat+DRBD等，比较常用的是keepalived+双主，MHA和PXC。本节主要介绍了利用keepalived实现MySQL数
分类：
数据库 时间：
2020-06-19 10:29:51
阅读次数：
54
INFO networking_baremetal.agent.ironic_neutron_agent [-] Reporting state for host agent 7a3402a7-8003-4598-90c1-cae0ac1bf757 with new configuration: { ...
分类：
其他好文 时间：
2020-06-09 13:03:48
阅读次数：
83
实验环境： Centos7.4 192.168.1.201 vampire01 主节点 Centos7.4 192.168.1.202 vampire02 备节点 Centos7.4 192.168.1.203 share nfs服务器 修改hosts文件或者指定内网的DNS服务器地址： vim / ...
分类：
系统相关 时间：
2020-06-05 14:45:13
阅读次数：
69
博文目录一、Nagios1、Nagios介绍2、Nagios主要功能3、Nagios的作用4、Nagios常见的监控状态5、Nagios的原理二、安装LAMP环境三、安装Nagios1、安装Nagios组件2、配置Apache支持Nagios3、配置SendMail邮件四、Nagios监控Linux客户端1、安装依赖程序2、安装Nagios-plugins插件3、安装NRPE插件一、Nagios1
分类：
移动开发 时间：
2020-06-04 12:04:12
阅读次数：
71
三台CentOS 6.5 x86_64 同一网段 主要软件 主机一（Nagios） nagios-4.0.1.tar.gz nagios-plugins-1.5 nrpe-2.15.tar.gz 主机二 （MySQL）nagios-plugins-1.5 nrpe-2.15.tar.gz 主机三 （ ...
分类：
移动开发 时间：
2020-06-03 20:18:57
阅读次数：
91
