码迷,mamicode.com
首页 > 系统相关 > 详细

「Bug」Linux 负载过高(K8s 节点)

时间:2020-04-06 23:55:14      阅读:202      评论:0      收藏:0      [点我收藏+]

标签:排查   技术   工具   描述   ima   一个   图片   自动部署   监控   

Bug 描述

K8s Worker 节点负载突然升高至 90+,导致节点 NotReady.
该节点为 8c/10G 的配置,这个负载显然不正常。

排查

首先用 htop,发现 cpu/memory 使用率都不高,怀疑是磁盘 IO 问题。

查看 prometheus 监控:
技术图片

发现是首先内存飙升致 100%,然后磁盘 IO 升高。

排查节点上的所有 Pod,发现新加了一个 Prometheus 容器,最后确定是另一个监控工具自动部署的。

「Bug」Linux 负载过高(K8s 节点)

标签:排查   技术   工具   描述   ima   一个   图片   自动部署   监控   

原文地址:https://www.cnblogs.com/kirito-c/p/12511841.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!