虚拟机无法接收keepalived的vrrp组播现象:在Ubuntu1404的系统下安装了三台虚拟机,然后配置了一个简单的keepalived+haproxy服务。结果启动后发现三台虚拟机都配上vip,keepalived.log日志中也未看见error的报错信息。排查过程:这些典型的脑裂(splitbrain)现象,一般来说先检..
分类:
其他好文 时间:
2016-10-14 00:56:56
阅读次数:
335
转自:http://blog.jobbole.com/104863/ 对于Java程序员你来说,在虚拟机内存管理的帮助下,不需要为每个new对象都匹配free操作,内存泄露和内存溢出等问题也不太容易出现,不过也正是因为把内存管理交给了虚拟机,一旦运行中的程序出现了内存泄露问题,给排查过程造成很大困难 ...
分类:
其他好文 时间:
2016-08-26 21:24:23
阅读次数:
165
官网在访问的时候不定时会出现500的错误,打开nginx的错误日志发现,里面有好多“Toomanyopenfiles”的报错。这个问题的出现原因是system对程序打开files数量的限制问题。于是对系统做如下优化:(1)vi/etc/security/limits.conf(修改参数)*softnofile102400*hardnofile102400..
分类:
其他好文 时间:
2016-07-29 19:37:46
阅读次数:
516
新到了一家公司,这几天,开发三天两头反应执行mysql语句报1024的错误,经排查,是max_allowed_packet值过小导致的。于是乎调大该参数命令行执行:解决办法1.mysql>setglobalmax_allowed_packet=2*1024*1024*10但是过了一天,又反映报错。于是查看该参数mysql>showvariab..
分类:
数据库 时间:
2016-07-29 19:37:41
阅读次数:
784
通过nginx做代理,将请求发送给后端的tomcat服务器,并将请求的信息一并传递给后端服务器:proxy_http_version1.1;proxy_set_headerConnection"";proxy_set_headerHost$host;proxy_set_headerx-real-ip$remote_addr;proxy_set_headerX-Forwarded-For$proxy_add_x_forwarded_for..
分类:
Web程序 时间:
2016-07-29 19:33:20
阅读次数:
462
近日在线上发现有些mapreduce作业的执行时间很长,我们需要解决这个问题。输入文件的大小是5G,采用了lzo压缩,整个集群的默认block大小是128M。本文将详细描述这次线上问题的排查过程。...
分类:
其他好文 时间:
2016-07-14 15:38:19
阅读次数:
179
问题现象及分析
可能原因分析
手动重现异常
大对象问题
流量暴涨
CPU资源被其他进程占用
内存被其他进程占用的情况swap分区问题
数据库连接异常
堆文件分析
shell脚本
JVM问题排查总结
其他遗留的问题
前段时间线上的zzuser的服务模块出现大量的异常FGC情况,经过大量排查工作,最后锁定是因为一个sql的大查询导致的。这也给了我非常大的教训,同时我在这次问题的排查过程中也获益匪浅,...
分类:
其他好文 时间:
2016-07-10 18:49:51
阅读次数:
365
01 今天有件事必须记录下,就是工作中犯错了,之前白盒测试问题排查过程中我漏掉了一个问题(没查出来),结果在问题单里有。而事实上这个问题还比较明显。这是重大失误。为此我深刻做了自我反省。 最近一个月,自从开始白盒测试以后,我的工作积极性直线下降,以至于消极对抗。最后导致今天的问题也算是顺理成章。 其 ...
分类:
其他好文 时间:
2016-07-01 22:49:41
阅读次数:
174
事情是这样的,昨天下午本人正在埋头苦干,旁边的同事突然说有台服务器的防火墙无法启动了。昨天该同事一直在补每台服务器的防火墙规则漏洞,发现这台服务器的防火墙规则和配置文件中的不一样,就想重启一下结果无法启动了。以前也遇到过系统上正在运行的防火墙规则和配置文件..
分类:
其他好文 时间:
2016-04-29 20:17:58
阅读次数:
269
今天程序在执行一项excel导出任务的时候 出现了nginx超时的提示 nginx 504 Gateway Time-out 排查过程: 查看该任务 发现内容是一个数据量20000条信息 每条信息有50个字段 在执行导出为excel的时候 出现了该问题 执行时间大概在10分钟左右就出现超时 分析: ...
分类:
其他好文 时间:
2016-04-01 17:43:46
阅读次数:
157