本来想基于docker搭建一套ELK玩一玩日志,奈何难度有点大,没能继续下去,后来转念一想,我是要使用elk来管理日志而已,又不是要做运维,所以直接找一款云上产品直接使用起来就可以了. 这是就上咱阿里云平台上看看啦,想起来他们有个SLS.用法与ELK类似.sls每个月还有500M的免费额度可以使用. ...
分类：
其他好文 时间：
2020-04-06 23:54:16
阅读次数：
367
ELK 是什么？ 通俗来讲，ELK 是由 Elasticsearch、Logstash、Kibana 三个开源软件组成的一个组合体，这三个软件当中，每个软件用于完成不同的功能，ELK 又称 ELKstack。 官网： https://www.elastic.co/ ELK 主要优点： 1、处理方式灵 ...
分类：
其他好文 时间：
2020-04-06 10:07:43
阅读次数：
79
**k8s集群日志收集**收集哪些日志K8S系统的组件日志K8SCluster里面部署的应用程序日志日志方案Filebeat+ELKFilebeat(日志采集工具)+Logstach(数据处理引擎)+Elasticserch(数据存储、全文检索、分布式搜索引擎)+Kibana（展示数据、绘图、搜索）容器中的日志怎么收集收集方案：Pod中附加专用日志收集的容器优点：低耦合缺点：每个Pod启动一个日志
分类：
其他好文 时间：
2020-04-05 09:46:15
阅读次数：
75
两种方法配置Spring项目输出JSON到LogStash或者使用FileBeat收集上传到ELK
分类：
编程语言 时间：
2020-04-02 01:20:53
阅读次数：
79
一、访问流追踪 log-trace： 减少代码级别插入日志 详细调用访问链路 唯一请求id,方便搜索 二、日志实时展示 1. 日志收集 使用队列，采用发布订阅模式 Kafka/RabbitMq: 使用logback 配置appender AMQP 消费端直接读取 支持ELK Mqtt: IBM协议， ...
分类：
其他好文 时间：
2020-04-01 14:55:28
阅读次数：
65
一、说说前因后果elasticsearch,kafka,zookeeper,kibana,elasticsearch-head,logstash，logstash是需要经常重启的，你上了点过滤规则或者修改点啥的，每次都尼玛杀进程，再nohup，还看不到日志，这太不符合人性了，人性的优点之一就是懒惰。打开web界面，点一下鼠标解决问题岂不是棒棒哒，还能通过web界面看看后台日志，故而用supervi
分类：
其他好文 时间：
2020-04-01 11:08:17
阅读次数：
74
1.三个节点 2.安装包 3.安装JDK-12版本 在/etc/profile添加环境变量 [root@node3 ~]# source /etc/profile cat >>/etc/profile <EOF export JAVA_HOME=/usr/java/jdk-12.0.1export ...
分类：
其他好文 时间：
2020-04-01 10:41:45
阅读次数：
54
一、日志收集端 1、nginx:nginx-1.16.1.tar.gz 为了kibana收集nginx日志获取字段，先将日志转化为json格式。格式样式如下： log_format access_json '{"@timestamp":"$time_iso8601",' '"host":"$serv ...
分类：
其他好文 时间：
2020-03-31 12:16:39
阅读次数：
95
统一日志收集 日志是追踪错误定位问题的关键，尤其在生产环境中，需要及时修复热部署，不会提供开发者debug的环境，此时日志将会是最快解决问题的关键 Logback 关于logback的配置和介绍，可以参考官网或推荐博客glmapper的logback博客，logback-spring.xml配置文件 ...
分类：
编程语言 时间：
2020-03-30 12:41:45
阅读次数：
69
在日常的运维工作中，日志是我们分析系统运行情况、问题定位、系统优化分析等操作的主要数据源头。同时在很多客户的实际场景中，为了满足公司的审计等要求，也会需要对某种特定类型的日志数据进行持久的存储，如SecurityEvent等，从而满足公司的合规性。对于此类的需求，其实我们有多种方式可以满足，比如使用某些企业级的日志收集系统等。那么在Azure中，我们如何来持久的保存某些类型的日志记录呢？
分类：
其他好文 时间：
2020-03-27 23:25:50
阅读次数：
108
