公司内部撘的zabbix服务器一直运行正常,某天突然发现zabbix-server服务启动不了了,没动过任何配置,记录下问题的排查过程1、pidfilezabbix_server.pidnotreadable(yet?)afterstart问题现象:通过查看系统命令systemctlstatuszabbix-server和journalctl-uzabbix-server-f发现一直提示Error
分类:
其他好文 时间:
2020-03-17 15:35:57
阅读次数:
153
如是tomcat 进程占用CPU 过高可以参考以下步骤打印进程堆栈进一步分析问题。 1、先用top查看占用cpu的进程id 2、再用ps -ef | grep PID定位具体的进程主体;如是否是tomcat启动的java程序 3、用ps -mp pid -o THREAD,tid,time打印出该进 ...
分类:
其他好文 时间:
2020-03-16 23:51:13
阅读次数:
172
真实案例:公司一台线上redis服务器前段时间在空闲状态下cpu也一直处于100%的状态,在查看对应进程的CPU后,发现一个奇怪的问题,平均CPU使用率远远大于redis进程、其它两个进程的所占用的CPU总和,但是top命令查看不到对应的占用过高的进程,于是初步怀疑有两种可能:1.硬件问题2.服务器受到***CPU病毒的***排查思路:1.因为是最新购买的云服务器,基本排除硬件问题(腾讯云监控会有报警
分类:
系统相关 时间:
2020-02-24 00:30:46
阅读次数:
250
线上系统突然变得卡顿或无法访问,排除网络异常的情况下,检查服务器资源占用情况,如果CPU、内存、磁盘IO等资源占用过高,就会导致无法继续处理HTTP请求。 如果是CPU占用飙高,有可能是程序中存在死循环、死锁导致的,也有可能是内存紧张从而频繁GC导致的,要具体问题具体分析。 排查过程 这里记录一次线 ...
分类:
其他好文 时间:
2020-02-06 11:07:57
阅读次数:
75
背景 为了系统统一管理在创建了系统后统一将网卡名称修改为eth0,eth1等格式,并在修改完网卡名称重新编译grub配置文件重启后,添加了静态路由,使用 查看系统发现路由可以生效,但是配置的默认网关不生效,记录下排查过程。 检查网卡配置文件并手动配置默认网关 在检查了网卡配置文件确认无误后,使用 命 ...
分类:
系统相关 时间:
2020-02-05 13:35:32
阅读次数:
240
作者|声东阿里云售后技术专家导读:排查完全陌生的问题、完全不熟悉的系统组件,是售后工程师的一大工作乐趣,当然也是挑战。今天借这篇文章,跟大家分析一例这样的问题。排查过程中,需要理解一些自己完全陌生的组件,比如systemd和dbus。但是排查问题的思路和方法基本上还是可以复用了,希望对大家有所帮助。问题一直在发生1.I‘mNotReady阿里云有自己的Kubernetes容器集群产品。随着
分类:
其他好文 时间:
2020-01-21 09:15:12
阅读次数:
80
作者 | 声东 阿里云售后技术专家 导读 :排查完全陌生的问题、完全不熟悉的系统组件,是售后工程师的一大工作乐趣,当然也是挑战。今天借这篇文章,跟大家分析一例这样的问题。排查过程中,需要理解一些自己完全陌生的组件,比如 systemd 和 dbus。但是排查问题的思路和方法基本上还是可以复用了,希望 ...
分类:
其他好文 时间:
2020-01-20 12:52:13
阅读次数:
63
一、背景 集群是二进制部署 部署完成后一起正常,各种资源对象均可正常创建、 部署应用后发现无法跨节点通信,且pod的ip都是172.17.0.0段的 二、排查过程层 查看节点路由,发现docker0网卡居然是172.17.0.0段(what?) 查找如下资料:基于docker的CNM部署flanel ...
分类:
其他好文 时间:
2019-12-21 00:23:17
阅读次数:
145
经由协同的处理过后数据包在监狱的数据填报系统解压失败问题 缺陷描述: 在西藏减刑假释项目现场联调过程中,经由协同处理过后发送给监狱数据填报业务系统的数据包解压失败。 缺陷排查过程: 1、查看协同处理数据包的过程中有误问题,数据包流转过程阶段的压缩打包操作有无报错(无报错) 2、将协同生成给监狱业务系 ...
分类:
其他好文 时间:
2019-12-20 11:45:12
阅读次数:
67
前言:当你在MySQL中执行一条SQL时,语句并没有在你预期的时间内执行完成,这时候我们通常会登陆到MySQL数据库上查看是不是出了什么问题,通常会使用的一个命令就是showprocesslist,看看有哪些session,这些session在做什么事情。当你看到waitingfortablemetadatalock时,那就是遇到MDL元数据锁了。本篇文章将会介绍MDL锁的产生与排查过程。1.什么
分类:
其他好文 时间:
2019-12-10 00:59:35
阅读次数:
114