E:\logstash-6.2.4\bin目录下新建logstash.conf E:\logstash-6.2.4\bin目录下新建run.bat logstash -f logstash.conf 修改logstash.bat %JAVA% %JAVA_OPTS% -cp "%CLASSPATH% ...
现在的公司由于绝大部分项目都采用分布式架构,很早就采用ELK了,只不过最近因为额外的工作需要,仔细的研究了分布式系统中,怎么样的日志规范和架构才是合理和能够有效提高问题排查效率的。经过仔细的分析和研究,确定下面的架构应该是比较合理的之一(Filebeat也支持直接写到ES)。关于ELK的各种架构以及 ...
分类:
其他好文 时间:
2018-06-02 20:40:33
阅读次数:
1466
(1)rsyslog配置 在192.168.1.31配置 (2)logstash配置 1.在192.168.1.32测试rsyslog接收 2.检测配置文件 3.在192.168.1.31上发送日志 4.验证 5.192.168.1.32上配置logstash将rsyslog日志输出到elastic ...
分类:
其他好文 时间:
2018-05-29 17:46:38
阅读次数:
257
服务端安装 Elasticsearch和Kibana(需要安装openjdk1.8以上) 安装方法:https://www.elastic.co以Ubuntu为例: elasticsearch配置 cat /etc/elasticsearch/elasticsearch.yml 附件有文件elast ...
分类:
其他好文 时间:
2018-05-24 21:15:35
阅读次数:
1247
【filebeat --> kafka --> logstash-->MongoDB|磁盘】架构进行日志收集 但是当logstash写入MongoDB有延迟,然后正常之后,会导致logstash循环收集kafka中的数据? 请各位大虾指点,是什么原因会导致这种情况,谢谢! 【PS】 我发现一个解决办 ...
分类:
其他好文 时间:
2018-05-22 18:26:42
阅读次数:
152
Logstash基本介绍和使用场景 自我认为:logstash就是日志的采集收集,日志的搬运工,实时去采集日志。读取不同的数据源,并进行过滤,开发者自定义规范输出到目的地。日志的来源很多,如系统日志,应用日志等等(同类软件:filebeat) 官方文档:https://www.elastic.co/ ...
分类:
其他好文 时间:
2018-05-22 17:22:26
阅读次数:
213
filebeat + logstash + elasticsearch + granfa https://www.cnblogs.com/wenchengxiaopenyou/p/9034213.html 一。背景 前端web服务器为nginx,采用filebeat + logstash + ela ...
分类:
其他好文 时间:
2018-05-19 14:02:44
阅读次数:
437
filebeat 指定tags,logstash filter 过滤出自己想要的日志格式
分类:
其他好文 时间:
2018-05-01 20:22:00
阅读次数:
931
ELK + Kafka + Filebeat学习 https://blog.csdn.net/qq_21383435/article/details/79463832 https://blog.csdn.net/xiangyuan1988/article/details/78977471 https ...
分类:
其他好文 时间:
2018-05-01 10:46:48
阅读次数:
214