1 curl -XPUT http://114.215.171.188:9200/logstash-serverlog/_settings -d '{"index":{"max_result_window":10800}}' ...
分类：
其他好文 时间：
2017-03-16 20:06:45
阅读次数：
911
最近需要搭建一套日志监控平台，结合系统本身的特性总结一句话也就是：需要将Kafka中的数据导入到elasticsearch中。那么如何将Kafka中的数据导入到elasticsearch中去呢，总结起来大概有如下几种方式： Kafka->logstash->elasticsearch->kibana ...
分类：
其他好文 时间：
2017-03-15 22:23:07
阅读次数：
645
Reason of this error:Fielddata can consume a lot of heap space, especially when loading high cardinality text fields. Once fielddata has been loaded i ...
分类：
其他好文 时间：
2017-03-14 15:44:16
阅读次数：
2382
介绍logstash处理log4j日志，包括log4j的简介、工程的搭建、log4j配置、logstash配置，实现日志从产生到logstash再到Elasticsearch的整个流程。
分类：
其他好文 时间：
2017-03-13 19:23:48
阅读次数：
1646
因为 nodejs 一般会部署在多台机器，并且每台机器会起多个进程，因此查看日志时往往要人工区分一个完整的请求包含哪些行。如果在日志中添加 服务器名称和进程id，就比较容易了。 如果在 filebeat 配置中修改正则表达式肯定是可以完成这个工作的，但今天发现 log4js（1.1.1版本） 的模块 ...
分类：
Web程序 时间：
2017-03-10 20:25:15
阅读次数：
730
3、kafka+logstash整合logstash1.5以后已经集成了对kafka的支持扩展，可以在conf配置中直接使用 vim /etc/logstash/conf.d/pay.conf input { kafka{ zk_connect => "your zookeeper address: ...
分类：
其他好文 时间：
2017-03-10 19:09:43
阅读次数：
371
1、ELK介绍 ELK不是一款软件，而是elasticsearch+Logstash+kibana三款开源软件组合而成的日志收集处理套件，堪称神器。其中Logstash负责日志收集，elasticsearch负责日志的搜索、统计，而kibana则是ES的展示神器，前端炫丽，点几下鼠标简单配置，就可以 ...
分类：
其他好文 时间：
2017-03-09 17:17:29
阅读次数：
339
1概述ELK套件（ELKstack）是指ElasticSearch、Logstash和Kibana三件套。这三个软件可以组成一套日志分析和监控工具。由于三个软件各自的版本号太多，建议采用ElasticSearch官网推荐的搭配组合：http://www.elasticsearch.org/overview/elkdownloads/2环境准备2.1软件要求具体的..
分类：
其他好文 时间：
2017-03-08 01:38:35
阅读次数：
220
假设日志文件中的每一行记录格式为json的，如： 默认配置下，logstash处理插入进elasticsearch后，查到的结果是这样的： 即会将json记录做为一个字符串放到”message”下，但是我是想让logstash自动解析json记录，将各字段放入elasticsearch中。有三种配置 ...
分类：
Web程序 时间：
2017-03-08 00:59:06
阅读次数：
1104
一、elasticsearch单机环境搭建 注：elasticsearch对JDK版本这有严格的要求，一般建议安装Java: openjdk version "1.8.0_xx" 配置ElasticSearch 编辑ES的配置文件，修改以下配置项： 启动ES： 打开页面IP:9200，将会看到以下内 ...
分类：
Web程序 时间：
2017-03-08 00:51:22
阅读次数：
640
