一:简述
本人之前搭建elk+redis架构收集日志,出现瓶颈,现使用新架构(els+kafka+rsyslog+hadoop-hdfs+zookeeper),解决方案。
二:搭建过程
A.rsyslogd服务
通过对 rsyslog官方文档 查看,得知 rsyslog对 kafka的支持是 v8.7.0版本后才提供的支持.通过 ChangeLog 也可以看出 V...
分类:
其他好文 时间:
2016-04-29 16:11:41
阅读次数:
1097
工作中,需要把用户执行的每一个命令都记录下来,并发送到日志服务器的需求,为此我做了一个简单的解决方案。这个方案会在每个用户退出登录 时把用户所执行的每一个命令都发送给日志守护进程rsyslogd,你也可通过配置“/etc/rsyslog.conf”进一步将日志发送给日志服务器第一种方法1234567...
分类:
系统相关 时间:
2015-09-04 19:54:00
阅读次数:
359
/var/logs/message-20150830: 2015-08-30T03:17:53.139145+08:00?`hostname`?rsyslogd-2165:?netstream?session?0x7f134c0a6930?from?10.13.0.18?will?be?closed?due?to?error??[v8.11.0?try?h...
分类:
其他好文 时间:
2015-08-31 21:52:19
阅读次数:
1466
1. 简介(1) 日志服务在CentOS 6.x中日志服务已经由rsyslogd取代了原先的syslogd服务。rsyslogd日志服务更加先进,功能更多。但是不论该服务的使用,还是日志文件的格式其实都是和syslogd服务相兼容的,所以学习起来基本和syslogd服务一致。rsyslogd的新特点...
分类:
系统相关 时间:
2015-08-15 16:14:39
阅读次数:
264
工作中,需要把用户执行的每一个命令都记录下来,并发送到日志服务器的需求,为此我做了一个简单的解决方案。这个方案会在每个用户退出登录时把用户所执行的每一个命令都发送给日志守护进程rsyslogd,你也可通过配置“etcrsyslog.conf”进一步将日志发送给日志服务器第一种方法#..
分类:
系统相关 时间:
2015-07-21 15:11:15
阅读次数:
181
工作中,需要把用户执行的每一个命令都记录下来,并发送到日志服务器的需求,为此我做了一个简单的解决方案。这个方案会在每个用户退出登录 时把用户所执行的每一个命令都发送给日志守护进程rsyslogd,你也可通过配置“etcrsyslog.conf”进一步将日志发送给日志服务器第一种方法# vi etcp...
分类:
系统相关 时间:
2015-07-21 10:32:55
阅读次数:
184
1.日志管理介绍:a.日志服务:在CentOS6.x中日志服务以及由rsyslogd取代了原有的syslogd服务。rsyslogd日志服务更加先进,功能更多。但是不论该服务的使用,还是日子文件的格式其实都是和syslogd服务相兼容的,所以会了syslogd也就会了rsyslod服务。b.rsys...
分类:
系统相关 时间:
2015-06-30 21:39:15
阅读次数:
181
Linux运维第二阶段(十三)日志管理一、1、在centos6.x中日志服务由rsyslogd取代了syslogd,新特点:基于TCP传输日志信息;更安全的网络传输方式;有日志消息的及时分析框架;后台数据库;配置文件中可写简单的逻辑判断;兼容syslogd。2、系统中常见的日志文件:/var/log/cron..
分类:
系统相关 时间:
2015-05-17 02:09:57
阅读次数:
265
日志中出现大量一下日志时May 24 18:42:08 yw_lvs2_backup rsyslogd-2177: imuxsock lost 353 messages from pid 20261 due to rate-limiting说明超过的rsyslog的配置记录最大峰值,可以通过sysl...
分类:
其他好文 时间:
2015-03-19 13:03:39
阅读次数:
261
Linux查看非root运行的进程
youhaidong@youhaidong-ThinkPad-Edge-E545:~$ ps -U root -u root -N
PID TTY TIME CMD
663 ? 00:00:00 dbus-daemon
713 ? 00:00:00 rsyslogd
730 ? ...
分类:
系统相关 时间:
2015-03-13 23:49:27
阅读次数:
450