需求1.开发人员不能登录线上服务器查看日志2.各个系统都有日志,日志分散难以查找3.日志数据量大,查找慢,数据不够实时解决办法:部署ELK平台ELK介绍ELK是三个开源软件的缩写,分别表示:Elasticsearch,Logstash,Kibana,它们都是开源软件。新增了一个FileBeat,它是一个轻量级的日志收集处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志
分类:
其他好文 时间:
2020-02-18 09:40:00
阅读次数:
367
CRUD 在我们的项目中有日志是一个必不可少的东西,但是日志的检索是一个很麻烦的事情,如每天一个日志,要找到问题就得一个一个找,并不能做到检索功能,这还算好的,如果是分布式的,每个机器都得找一遍,这种效率太低,当然可以把日志收集到一个文件中,多个机器每天的日志可以收集到一块,如果把所有的日志收集一块 ...
分类:
其他好文 时间:
2020-02-13 17:35:35
阅读次数:
102
下载地址:https://www.elastic.co/cn/downloads/elasticsearch 下载对应需要的 ES 。我这边是 Linux 的系统。另外 ES 支持 Docker 方式启动。另外,ES 7.x 不需要本地 JDK 环境支持: ES 5,安装需要 JDK 8 以上 ES ...
分类:
其他好文 时间:
2020-02-12 18:45:40
阅读次数:
60
四 资源控制器 一、什么是控制器 Kubernetes 中内建了很多 controller(控制器),这些相当于一个状态机,用来控制 Pod 的具体状态和行为 二、控制器类型 ① ReplicationController 和 ReplicaSet ② Deployment ③ DaemonSet ...
分类:
Web程序 时间:
2020-02-07 22:16:07
阅读次数:
110
操作系统: centos版本 7.4 防火墙 关闭 selinux 关闭 kibana版本 6.3.2 java版本 1.8 server2 192.168.10.127 [root@server2 ~]# tar zxf kibana-6.3.2-linux-x86_64.tar.gz -C /u ...
分类:
其他好文 时间:
2020-02-07 10:23:09
阅读次数:
70
在优锐课的java架构学习中,了解有关ELK监视和日志记录堆栈以及如何在一个位置整理多个微服务的日志的信息IT的重要阶段之一是后期制作阶段,而主要挑战之一就是确定后期制作中的问题。当多个应用程序在不同系统中吐出不同的日志时,将它们放在一个地方进行整理对于IT团队进行管理很重要。在这里,ELK堆栈可以解救。在本教程中,我将介绍什么是ELK以及如何聚合来自不同微服务的日志并将其推送到一个公共位置。什么
分类:
编程语言 时间:
2020-02-04 23:40:27
阅读次数:
142
Kafka系列1:Kafka概况 Kafka是当前分布式系统中最流行的消息中间件之一,凭借着其高吞吐量的设计,在日志收集系统和消息系统的应用场景中深得开发者喜爱。本篇就聊聊Kafka相关的一些知识点。主要包括以下内容: Kafka简介 Kafka特点 Kafka基本概念 Kafka架构 Kafka的 ...
分类:
其他好文 时间:
2020-02-04 23:18:57
阅读次数:
78
https://www.liaoxuefeng.com/wiki/1016959663602400/1017092876846880(根据博客) 数据类型与变量 通常错误 SyntaxError: invalid syntax:这是语法错误 IndentationError: unexpected ...
分类:
编程语言 时间:
2020-01-31 14:31:46
阅读次数:
69
ELK版本:elasticsearch-5.2.2 kibana-5.2.2 logstash-2.4.1 all plugins 部署环境为单台服务器,未配置集群 一、官网下载地址:https://www.elastic.co/downloads 二、elasticsearch安装 1、由于安装E ...
分类:
其他好文 时间:
2020-01-31 00:40:19
阅读次数:
87
一、消息重复现象 在 MQTT 协议中,给出了三种传递消息时能够提供的服务质量标准: At most once:最多一次,这种情况会丢失部分数据,一般日志收集这种对数据不严格的可以使用 At least once:最少一次,这种会导致一条消息重复发送 Exactly once:正好一次,一条消息只会 ...
分类:
其他好文 时间:
2020-01-30 09:14:17
阅读次数:
500