1. Elasticsearch Updates 1.1 公布了Kibana 4 Beta 1 和Beta 1.1 Kibana 4不管是在界面的布局,使用配置方法,还是底层绘制图表的方式都与Kibana不同。在Kibana 3的基础上吸取了众多社区的功能需求后。Kibana自Kibana 2 大改 ...
分类:
其他好文 时间:
2017-05-07 13:59:51
阅读次数:
223
下载安装包 进入官网 https://www.elastic.co/cn/downloads 下载Kibana,得到 kibana-5.0.0-linux-x86_64.tar.gz 解压安装 将 kibana-5.0.0-linux-x86_64.tar.gz 拷贝到 /opt 目录下。 解压到当 ...
分类:
系统相关 时间:
2017-05-07 10:08:53
阅读次数:
268
1、server.conf文件[elk@logserverbin]$catserver.conf
input{
redis{
host=>"10.10.45.200"
data_type=>"list"
key=>"elk_frontend_access:redis"
port=>"5379"
}
}
output{
if"_grokparsefailure"in[tags]{
}else{
if[type]=="www1_access"{
elasticsearch{
host..
分类:
其他好文 时间:
2017-05-06 17:37:04
阅读次数:
3053
因为docker产生的容器不是一个永久存储的文件,所以无法保证你的文件永久保存。建议大家把容器产生的日志通过fluentd,flume,logstash等工具传送到一个日志仓库,这样保证方便保证数据的安全和管理。由于docker官方的推荐,我们本次讲解是fluentd日志收集组件。具体使用如下:..
分类:
其他好文 时间:
2017-05-05 23:15:08
阅读次数:
1798
写在前面:在做ELK logstash 处理MySQL慢查询日志的时候出现的问题: 1、测试数据库没有慢日志,所以没有日志信息,导致 IP:9200/_plugin/head/界面异常(忽然出现日志数据,删除索引后就消失了) 2、处理日志脚本问题 3、目前单节点 配置脚本文件/usr/local/l ...
分类:
数据库 时间:
2017-05-05 18:29:28
阅读次数:
394
【一】资源准备#3台4C*8G,安装Zookeeper、Kafka、Logstash——Broker(input:filebeat;output:Kafka)10.101.2.2310.101.2.2410.101.2.25#2台4C*8G,安装Logstash——Indexer(input:Kafaka;output:Elasticsearch)10.101.2.2610.101.2.27#3台8C*16G,安装Elasticsearch10.101.2.2810..
分类:
其他好文 时间:
2017-05-04 23:11:46
阅读次数:
2545
Logstash日志收集实践 先了解以下几个基本概念: logstash收集日志基本流程: input-->codec-->filter-->codec-->output 1.input:从哪里收集日志。 2.filter:发出去前进行过滤 3.output:输出至Elasticsearch或Red ...
分类:
其他好文 时间:
2017-05-02 13:55:30
阅读次数:
142
ElkStack介绍 对于日志来说,最常见的需求就是收集、存储、查询、展示,开源社区正好有相对应的开源项目:logstash(收集)、elasticsearch(存储+搜索)、kibana(展示),我们将这三个组合起来的技术称之为ELKStack,所以说ELKStack指的是Elasticsearc ...
分类:
其他好文 时间:
2017-05-02 13:44:37
阅读次数:
168
0. 背景 我们在使用ELK进行日志记录的时候,通过网址在Kibana中查看我们的应用程序(eg: Java Web)记录的日志, 但是默认是任何客户端都可以访问Kibana的, 这样就会造成很不安全,我们应该设置相应的用户名和密码, 只有通过登录用户名和密码才能通过Kibana查看我们的日志。 1 ...
分类:
其他好文 时间:
2017-04-29 15:15:45
阅读次数:
377
Kibana也是一个开源和免费的工具,他可以帮助您汇总、分析和搜索重要数据日志并提供友好的web界面。他可以为Logstash 和ElasticSearch 提供日志分析的Web界面 它是一个基于浏览器页面的ES前端展示工具,是为ES提供日志分析的web接口,可用它对日志进行高效的搜索、可视化、分析 ...
分类:
其他好文 时间:
2017-04-29 12:51:57
阅读次数:
856