最近生产环境有个设备磁盘空间达到97%以上。
通过排查发现logstash产生的nohup.out文件有20Gb。
该日志是生产上一个重要的kafka消息消费程序，程序不能停止。而使用删除命令
rm -rf nohup,out
删除日志肯定不起作用，日志被logstash程序占用。
通过使用
lsof |grep -i delete
发现日志果然被logstash程序占用。
这可如何是好。
恰好同事过来讨论其他项目问题，和同事沟通后，给了我一个抖机灵的好办法。
echo ‘‘> nohup.out
将日志文件清空。
果然执行命令后磁盘空间被释放，恢复到告警级别以下。
遇到问题多和同事讨论交流，自己也要遇到问题多找一些非常规的解决问题的思路。
