一、环境准备1.安装java环境:yuminstalljava-1.8.0-openjdk*-y2.添加elk执行用户:groupadd-g77elk
useradd-u77-gelk-d/home/elk-s/bin/bashelk3.在/etc/security/limits.conf追加以下内容:elksoftmemlockunlimited
elkhardmemlockunlimited
*softnofile65536
*hardnofile131..
分类:
其他好文 时间:
2017-06-05 14:13:51
阅读次数:
301
1. 问题描述 我们需要将不同服务器(如Web Server)上的log4j日志传输到同一台ELK服务器,介于公司服务器资源紧张(^_^) 2. 我们需要用到filebeat 什么是filebeat? filebeat被用来ship events,即把一台服务器上的文件日志通过socket的方式,传 ...
分类:
其他好文 时间:
2017-05-27 00:38:06
阅读次数:
1046
元字符 描述 \ 将下一个字符标记符、或一个向后引用、或一个八进制转义符。 例如,“\\n”匹配\n。“\n”匹配换行符。序列“\\”匹配“\”而“\(”则匹配“(”。即相当于多种编程语言中都有的“转义字符”的概念。 ^ 匹配输入字符串的开始位置。如果设置了RegExp对象的Multiline属性, ...
分类:
其他好文 时间:
2017-05-26 10:58:30
阅读次数:
220
元字符 描述 \ 将下一个字符标记符、或一个向后引用、或一个八进制转义符。例如,“\\n”匹配\n。“\n”匹配换行符。序列“\\”匹配“\”而“\(”则匹配“(”。即相当于多种编程语言中都有的“转义字符”的概念。 ^ 匹配输入字符串的开始位置。如果设置了RegExp对象的Multiline属性,^ ...
分类:
其他好文 时间:
2017-05-25 13:21:08
阅读次数:
198
续之前安装好的ELK集群 各主机:es-1 ~ es-3 :192.168.1.21/22/23 logstash: 192.168.1.24 kibana: 192.168.1.25 测试机:client: 192.168.1.26 在测试机上安装并启动filebeat 1. 下载filebeat ...
分类:
其他好文 时间:
2017-05-21 23:24:19
阅读次数:
533
elasticstack基础组件beats详解fielbeatfilebeat:
spool_size:1024#最大可以攒够1024条数据一起发送出去
idle_timeout:"5s"#否则每5秒钟也得发送一次
registry_file:".filebeat"#文件读取位置记录文件,会放在当前工作目录下。所以如果你换一个工作目录执行filebeat
会导致重复..
分类:
其他好文 时间:
2017-05-17 15:23:42
阅读次数:
775
ELK架构:elasticsearch+kibana+filebeat版本信息:elasticsearch5.2.1kibana5.2.1filebeat6.0.0(预览版)今天在进行ELK测试的时候,在kibana上面discover无论那个index,发现均会报错:[request]Datatoolarge,datafor[<agg[2]>]wouldbelargerthanlimitof并且在elasticsea..
分类:
Web程序 时间:
2017-05-16 23:19:02
阅读次数:
1228
一、filebeat概述 Filebeat是一个日志文件托运工具,在你的服务器上安装客户端后,filebeat会监控日志目录或者指定的日志文件,追踪读取这些文件(追踪文件的变化,不停的读),并且转发这些信息到elasticsearch或者logstarsh中存放 工作流程 当你开启filebeat程 ...
分类:
其他好文 时间:
2017-05-08 18:45:41
阅读次数:
383
【一】资源准备#3台4C*8G,安装Zookeeper、Kafka、Logstash——Broker(input:filebeat;output:Kafka)10.101.2.2310.101.2.2410.101.2.25#2台4C*8G,安装Logstash——Indexer(input:Kafaka;output:Elasticsearch)10.101.2.2610.101.2.27#3台8C*16G,安装Elasticsearch10.101.2.2810..
分类:
其他好文 时间:
2017-05-04 23:11:46
阅读次数:
2545