[toc] 一、ELK简介 在日常运维工作中，对于系统和业务日志的处理尤为重要。今天，在这里分享一下自己部署的Filebeat+ELK开源实时日志分析平台的记录过程，有不对的地方还望指出。 简单介绍： 日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、 ...
分类：
系统相关 时间：
2019-12-20 18:17:12
阅读次数：
83
主要内容 1 ELK概念 2 K8S需要收集哪些日志 3 ELK Stack日志方案 4 容器中的日志怎么收集 5 K8S平台中应用日志收集 准备环境 一套正常运行的k8s集群，kubeadm安装部署或者二进制部署即可 |ip地址 |角色 |备注| | | : : | : : | 192.168.7 ...
分类：
Web程序 时间：
2019-12-05 23:57:05
阅读次数：
240
ELK 日志分析 1. 为什么用到 ELK 一般我们需要进行日志分析场景：直接在日志文件中 grep、 awk 就可以获得自己想要的信息。但在规模较大的场景中，此方法效率低下，面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理，所有服务器上的日志收集汇总。常见解 ...
分类：
其他好文 时间：
2019-12-02 13:12:46
阅读次数：
156
Elasticsearch+logstash+kibana
分类：
其他好文 时间：
2019-11-28 15:08:19
阅读次数：
64
收集系统其它服务日志，在客户端node1 上操作，示例以openstack-nova 服务的日志为例： 1.先修改配置文件 /etc/rsyslog.conf，完整内容如下： [root@node1 ~]# egrep -v '^#|^$' /etc/rsyslog.conf $ModLoad im ...
分类：
其他好文 时间：
2019-11-28 13:32:01
阅读次数：
169
两者都是一个分布式架构 kafka 具有较高的吞吐量，rabbimq 吞吐量较小 rabbitmq 的可靠性更好，确认机制（生产者和 exchange，消费者和队列），支持事务，但会造成阻塞，委托（添加回调来处理发送失败的消息）和备份交换器（将发送失败的消息存下来后面再处理）机制 kafka 常用于 ...
分类：
其他好文 时间：
2019-11-25 13:22:45
阅读次数：
101
Tags：k8s环境下的容器日志收集K8S环境下面如何收集应用日志在本文中重点讲一下K8S容器环境中如何收集容器的日志；1.容器日志收集方案的选择：??在K8S集群中，容器的日志收集方案一般有三种；第一种方案是通过在每一个k8s节点安装日志收集客户端软件，比如fluentd。这种方案不好的一点是应用的日志必须输出到标准输出，并且是通过在每一台计算节点的/var/log/co
分类：
其他好文 时间：
2019-11-24 09:50:35
阅读次数：
77
恢复内容开始 一、日志收集系统设计 1.项目背景 a. 每个系统都有日志，当系统出现问题时，需要通过日志解决问题 b. 当系统机器比较少时，登陆到服务器上查看即可满足 c. 当系统机器规模巨大，登陆到机器上查看几乎不现实 2.解决方案 a. 把机器上的日志实时收集，统一的存储到中心系统 b. 然后再 ...
分类：
编程语言 时间：
2019-11-22 12:11:42
阅读次数：
67
ELK日志分析及操作步骤： 一般我们需要进行日志分析场景：直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景 中，此方法效率低下，面临问题包括日志量太大如何归档、文本 搜索太慢怎么办、如何多维度查询。需要集中化的日志管理，所 有服务器上的日志收集汇总。常见解决思路是建立 ...
分类：
其他好文 时间：
2019-11-22 10:34:33
阅读次数：
93
XSS***XSS***的全称是跨站脚本***(CrossSiteScripting),是WEB应用程序中最常见到的***手段之一。跨站脚本***指的是***者在网页中嵌入恶意脚本程序,当用户打开该网页时,脚本程序便开始在客户端的浏览器上执行,以盗取客户端cookie、盗取用户名密码、下载执行病毒***程序等等。为了不和层叠样式表(CascadingStyleSheets,CSS)的缩写混淆,故将跨站脚本***缩
分类：
编程语言 时间：
2019-11-18 09:54:56
阅读次数：
98
