一、课程介绍 在以前,我们做日志收集大多使用 Log4net,Nlog 等框架,在应用程序变得复杂并且集群的时候,可能传统的方式已经不是很好的适用了,因为收集各个日志并且分析他们将变得麻烦而且浪费时间。相信大家的项目中日志功能已经做为基础设施里必不可少的一部分了,日志记录不仅可以更好的记录用户行为, ...
分类:
Web程序 时间:
2020-01-29 15:54:15
阅读次数:
103
ETCD 日志收集项目 为什么要自己写不用ELK? ELK: 部署的时候麻烦每一个filebeat都需要配置一个配置文件 使用etcd来管理被收集的日志项。 项目的架构 上节课项目进度 1. kafka:消息队列 2. tailf:从文件里读日志 3. go ini:解析配置文件 今日内容 etcd ...
分类:
其他好文 时间:
2020-01-29 10:58:36
阅读次数:
193
操作系统: centos版本 7.4 防火墙 关闭 selinux 关闭 elasticsearch版本 6.3.2 java版本 1.8 server1 192.168.10.126 server2 192.168.10.127 [root@server1 ~]# wget -c https:// ...
分类:
其他好文 时间:
2020-01-28 19:16:55
阅读次数:
73
前端 VUE 接入层 DNS:阿里云 负载均衡:lvs+nginx/SLB/ELB 逻辑层 Java、C、C++、PHP、C# 存储层 MySQL/Redis 消息中间件 nsq 代码管理 gitlab 持续集成 jenkins 项目管理 redmind 名字服务 qconf zk 日志系统 elk ...
分类:
其他好文 时间:
2020-01-28 17:31:52
阅读次数:
64
原理分析 分析 : 在采集数据的网页上进行埋点(编写一小段js用于动态生成Img标签,然后加入dom页面中,利用该标签将参数请求至服务器中) 通过img标签的src属性可以解决跨域问题将数据传递给后端服务器 后端服务器执行步骤: 1. 接受请求 , 响应图片(log.gif) 2. 解析参数 , 保 ...
分类:
其他好文 时间:
2020-01-27 21:55:21
阅读次数:
458
[TOC] 1、ES基本操作 Elasticsearch的概念 1. 索引 类似于Mysql中的数据库 2. 类型 类似于Mysql中的数据表 3. 文档 存储数据 ES&kibana 测试Web接口 1. 浏览器访问 2. Kibana操作: 出现下图所示的效果,说明kibana和ES联动成功。 ...
分类:
其他好文 时间:
2020-01-27 17:29:26
阅读次数:
80
[TOC] ELK 0、ELK概述 | 角色 | 套接字 | | | | | kibana | 192.168.80.20:5601 | | elasticsearch | 192.168.80.20:9200 | | logstash | 192.168.80.10:9600 | 概述 我们在学习 ...
分类:
其他好文 时间:
2020-01-26 19:12:31
阅读次数:
90
1 安装一个redis服务 [root@node4 ~]# yum -y install redis 直接启动 [root@node4 ~]# systemctl restart redis [root@node4 ~]# systemctl status redis [root@node4 ~]# ...
分类:
其他好文 时间:
2020-01-21 00:51:00
阅读次数:
94
Filebeat收集Docker日志 1 安装docker [root@node4 ~]# yum install -y yum-utils device-mapper-persistent-data lvm2 [root@node4 ~]# yum update [root@node4 ~]# y ...
分类:
其他好文 时间:
2020-01-19 21:55:22
阅读次数:
223
filebeat收集tomcat日志 1 安装tomcat [root@node4 ~]# yum -y install tomcat tomcat-webapps tomcat-admin-webapps tomcat-docs-webapp tomcat-javadoc [root@node4 ...
分类:
其他好文 时间:
2020-01-19 19:37:07
阅读次数:
218