一. ELK是什么?ELK 是elastic公司提供的一套完整的日志收集以及展示的解决方案,是三个产品的首字母缩写,分别是ElasticSearch、Logstash 和 Kibana。 ElasticSearch简称ES,它是一个实时的分布式搜索和分析引擎,它可以用于全文搜索,结构化搜索以及分析。 ...
分类:
其他好文 时间:
2019-11-15 09:19:31
阅读次数:
92
[TOC] EFK日志系统 一,EFK日志系统简介: 关于系统日志收集处理方案,其实有很多种,因为之前使用ES比较多,所以也认为ELK是一个不错的解决方案,ELK(Elasticsearch + Logstash + Kibana)来管理日志。 Kubernetes 也要实现在整个集群级别收集和聚合 ...
分类:
其他好文 时间:
2019-11-12 14:47:14
阅读次数:
127
ELK简介ELK是三个开源软件的缩写,分别为:Elasticsearch、Logstash以及Kibana,它们都是开源软件。不过现在还新增了一个Beats,它是一个轻量级的日志收集处理工具(Agent),Beats占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具,目前由于原本的ELKStack成员中加入了Beats工具所以已改名为ElasticStack。一El
分类:
其他好文 时间:
2019-11-09 11:33:13
阅读次数:
96
微服务架构的项目,一次请求可能会调用多个微服务,这样就会产生多个微服务的请求日志,当我们想要查看整个请求链路的日志时,就会变得困难,所幸的是我们有一些集中日志收集工具,比如很热门的ELK,我们需要把这些日志串联起来,这是一个很关键的问题,如果没有串联起来,查询起来很是很困难,我们的做法是在开始请求系 ...
分类:
其他好文 时间:
2019-11-07 10:04:20
阅读次数:
92
日志收集 1.日志作用 不管是在项目开发还是测试过程中,项目运行一旦出现了问题,日志信息就非常重要了,日志是定位问题的重要手段,是发现bug的线索 2.日志级别 脚本运行会有很多情况,比如调试信息,报错异常信息等,日志要根据这些不同情况继续分级管理,不然对于排查问题的筛选会有比较大的干扰,日志一般定 ...
分类:
其他好文 时间:
2019-11-01 18:40:51
阅读次数:
81
如果你想学习ELK,这是一篇不错的,引导你入门的文章,适用于零基础.
分类:
其他好文 时间:
2019-10-16 23:35:00
阅读次数:
88
网站数据统计分析工具是网站站长和运营人员经常使用的一种工具,比较常用的有谷歌分析、百度统计 和 腾讯分析等等。所有这些统计分析工具的第一步都是网站访问数据的收集。目前主流的数据收集方式基本都是基于javascript的。本文将简要分析这种数据收集的原理,并一步一步实际搭建一个实际的数据收集系统。 注 ...
分类:
Web程序 时间:
2019-10-07 19:41:04
阅读次数:
158
A系统与B系统之间有很多接口交互,但是有一段时间接口经常报错,作为开发如果不能第一时间知道问题且及时解决的话就会收到业务投诉,当月绩效凉凉。 如果你也有这种场景,那么你就需要一个及时告警的功能。 实现方案 实现及时告警分以下两种场景: 有ELK日志收集 没有ELK日志收集 没有ELK日志收集的方案 ...
分类:
其他好文 时间:
2019-10-05 14:12:13
阅读次数:
86
近期查看产品日志,看到如下GC日志,收集整理如下 Tomcat垃圾回收日志(tomcat gc .log) [GC (Allocation Failure) [ParNew: 367523K 1293K(410432K), 0.0023988 secs] 522739K 156516K(132249 ...
分类:
其他好文 时间:
2019-09-29 19:46:46
阅读次数:
97
一、前言 NET Core越来越受欢迎,因为它具有在多个平台上运行的原始.NET Framework的强大功能。Kafka正迅速成为软件行业的标准消息传递技术。这篇文章简单介绍了如何使用.NET(Core)和Kafka实现NLog的Target。 在日常项目开发过程中,Java体系下Spring B ...
分类:
Web程序 时间:
2019-09-29 09:51:00
阅读次数:
131