ELK E: ElasticSearch 搜索引擎 存储 https://www.elastic.co/cn/downloads/elasticsearch L: Logstash 日志收集 https://www.elastic.co/cn/downloads/logstash K: kibana ...
分类:
其他好文 时间:
2019-09-12 18:07:24
阅读次数:
101
一.使用logstash同步订单数据(订单表和订单项表)到ElasticSearch: 1.到官网下载logstash:https://www.elastic.co/cn/downloads/logstash 2.安装logstash前,确保需要先安装java的jdk环境 3.下载后,解压:之后千万 ...
分类:
其他好文 时间:
2019-09-12 13:32:01
阅读次数:
113
logstash 安装和简单使用 1:安装jdk: [root@elk03tools]# rpm -ivh jdk-8u221-linux-x64.rpm warning: jdk-8u221-linux-x64.rpm: Header V3 RSA/SHA256 Signature, key ID ...
分类:
其他好文 时间:
2019-09-09 22:19:24
阅读次数:
222
前提:已配置好Redis集群,并设置的有统一的访问密码 架构是filebeat redis集群 logstash elasticsearch,需要修改filebeat的输出和logstash的输入值 filebeat地址:192.168.80.108 redis集群地址:192.168.80.107 ...
分类:
其他好文 时间:
2019-08-29 09:48:30
阅读次数:
359
整体流程 1. filebeat收集openresty应用日志传输到Redis集群中 2. Logstash从Redis集群中拉取数据,并传输到Elasticsearch集群 3. 使用Kibana可视化索引 4. 使用Elasticsearch head管理lasticsearch集群 注:Log ...
分类:
其他好文 时间:
2019-08-28 18:38:31
阅读次数:
91
下载Kafka和Zookeeper镜像文件 先运行zk,再运行kafka 创建主题 在项目代码我们可以进行AOP日志处理,将异常信息 发送到Kafaka 然后 Logstash订阅话题,将数据写入到ES中。 Logstash配置: 通过Logstash去订阅主题,主题要保持一致与代码,与创建的主题。 ...
分类:
其他好文 时间:
2019-08-24 22:45:11
阅读次数:
118
filebeat+elk日志收集平台搭建流程 1、 整体简介: 模式:单机 平台:Linux - centos - 7 ELK:elasticsearch、logstash、kibana三款开源软件的集合。 FILEBEAT:代替logstash的采集功能,轻量、耗用小。 目前收集的有nginx日志 ...
分类:
其他好文 时间:
2019-08-23 22:12:59
阅读次数:
111
原文:ELK日志系统:Filebeat使用及Kibana如何设置登录认证 根据elastic上的说法: Filebeat is a lightweight, open source shipper for log file data. As the next-generation Logstash ... ...
分类:
其他好文 时间:
2019-08-21 09:31:49
阅读次数:
131
logstashjavatomcattcpudprsysloghaproxyredis logstash补充1 通过logtsash收集tomcat和java日志server.xml/etc/init.d/tomcat stoprm -rf /apps/tomcat/logs/*/etc/init.... ...
分类:
其他好文 时间:
2019-08-20 10:26:07
阅读次数:
212
传统ELK图示: 单纯使用ElK实现分布式日志收集缺点? 1、logstash太多了,扩展不好。 如上图这种形式就是一个 tomcat 对应一个 logstash,新增一个节点就得同样的拥有 logstash,可以说很浪费了。 2、读取IO文件,可能会产生日志丢失。 3、不是实时性 比如logsta ...
分类:
其他好文 时间:
2019-08-16 00:56:00
阅读次数:
209