Kafka宕机引发的高可用问题 问题要从一次Kafka的宕机开始说起。 笔者所在的是一家金融科技公司,但公司内部并没有采用在金融支付领域更为流行的RabbitMQ,而是采用了设计之初就为日志处理而生的Kafka,所以我一直很好奇Kafka的高可用实现和保障。从Kafka部署后,系统内部使用的Kafk ...
分类:
其他好文 时间:
2021-06-02 14:22:26
阅读次数:
0
概述 日常工作中,程序员需要经常处理线上的各种大小故障,如果业务代码没打印日志或者日志打印的不好,会极大的加大了定位问题的难度,使得解决bug的时间变长了。 对于那种影响比较大的bug,处理时间是分秒必争的,慢几秒处理完,可能GMV就哗啦啦的掉了很多。 一个程序员是否优秀,其中一个判断维度就是:处理 ...
分类:
其他好文 时间:
2021-06-02 14:19:07
阅读次数:
0
hadoop 1.0 1. 创建用户hadoop 2. 下载: curl -o hadoop-1.2.1-bin.tar.gz https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1-bin.tar.gz 3. ...
分类:
其他好文 时间:
2021-06-02 14:05:53
阅读次数:
0
STP 概述 STP算法步骤 BPDU STP状态 概述 实际中交换网络环路会产生 *广播风暴 *多帧复制 *MAC地址表紊乱 STP(Spanning Tree Protocol)生成树协议 逻辑上断开环路,防止广播风暴的产生 当线路故障,阻塞接口被激活,恢复通信,起备份线路的作用 SPD算法步骤 ...
分类:
其他好文 时间:
2021-06-02 13:56:09
阅读次数:
0
Telnet 缺乏加密,这使得 OpenSSL 成为连接远程系统的更安全的选择。 telnet?命令是最受欢迎的网络故障排除工具之一,从系统管理员到网络爱好者都可以使用。在网络计算的早期,telnet?被用来连接到一个远程系统。你可以用?telnet?访问一个远程系统的端口,登录并在该主机上运行命令 ...
分类:
Web程序 时间:
2021-06-02 13:55:49
阅读次数:
0
目录 VRRP协议 VRRP的工作原理 指令 实验运用 VRRP协议 局域网中的用户终端通常采用配置一个网关的形式访问外部网络,如果此时网关设备发生故障,将中断所有用户终端的网络访问,在实际可能会造成巨大的损失.VRRP技术,实现网关的备份,又能解决多个网关之间互相冲突的问题。 VRRP基本概述(生 ...
分类:
其他好文 时间:
2021-06-02 13:52:53
阅读次数:
0
一、大数据分析工具——Hadoop Hadoop是一个能够对大量数据进行分布式处理的软件框架。但是Hadoop是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保能够针对失败的节点重新分布处理。Hadoop是高效的,因为它 ...
分类:
其他好文 时间:
2021-06-02 13:17:23
阅读次数:
0
【网络环境】路由器【华为荣耀路由Pro 2+【傻瓜交换机】,路由器网络开启了【授权认证】上网方式。【故障现象】第一次安装铁威马F4-421的TNAS设备,通过助手刷新无数次都显示空白,无法搜索到TNAS设备(如下图示):【解决方法】1、通过手机访问路由器管理--【点击更多】(如下图示) →→2、打开 ...
分类:
其他好文 时间:
2021-06-02 12:24:25
阅读次数:
0
弱网测试 概念 在当今移动互联网盛行的时代,网络的形态除了有线连接,还有2G/3G/Edge/4G/Wifi等多种手机网络连接方式。不同的协议、不同的制式、不同的速率,使移动应用运行的场景更加丰富。 从测试角度来说,需要额外关注的场景就远不止断网、网络故障等情况了。对于弱网的数据定义,不同的应用所界 ...
分类:
移动开发 时间:
2021-05-25 18:37:38
阅读次数:
0
安装准备 Spark 集群和 Hadoop 类似,也是采用主从架构,Spark 中的主服务器进程就叫 Master(standalone 模式),从服务器进程叫 Worker Spark 集群规划如下: node-01:Master node-02:Worker node-03:Worker 安装步 ...
分类:
其他好文 时间:
2021-05-24 17:07:05
阅读次数:
0