一、ELK Stack介绍 大型项目，多产品线的日志收集 ，分析平台 为什么用ELK? 1.开发人员排查问题，服务器上查看权限 2.项目多，服务器多，日志类型多 数据源 logstash elasticsearch kibana elasticsearch:分布式数据库 logstash:服务器端数 ...
分类：
其他好文 时间：
2019-07-24 19:32:41
阅读次数：
135
"回到目录" 我的那些年(13)~主推微服务架构 整个系统走向微服务架构 网关 服务注册与发现 配置中心 熔断器 链路跟踪 授权与鉴权 服务间的通讯 同步feign 服务间的通讯 异步消息 日志收集 个系统走向微服务架构 公司系统比较多，耦合度比较大，将这些模块进行拆分，各个负责自己的模块，减少相互 ...
分类：
其他好文 时间：
2019-07-17 10:53:08
阅读次数：
91
原文:开源监控利器grafana前言： 做运维的很重要的基础工作就是监控，之前都是统计数据入库，然后前端js图表插件出图，费时费力，可定制性差 前几天接触到了ELK(logstash, elasticsearch, kibana)这套日志收集展示工具集,的确很方便，但是手头没有那么大的存储啊 也不是... ...
分类：
其他好文 时间：
2019-07-17 09:33:50
阅读次数：
170
作者：秦伟1.ELK的背景介绍与应用场景在项目应用运行的过程中，往往会产生大量的日志，我们往往需要根据日志来定位分析我们的服务器项目运行情况与BUG产生位置。一般情况下直接在日志文件中tailf、grep、awk就可以获得自己想要的信息。但在规模较大的场景中，此方法效率低下，面临问题包括日志量过大、文本搜索太慢、如何多维度查询。这就需要对服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统
分类：
其他好文 时间：
2019-07-11 16:58:28
阅读次数：
241
一．什么是kafkakafka的目标是实现一个为处理实时数据提供一个统一、高吞吐、低延迟的平台。是分布式发布-订阅消息系统，是一个分布式的，可划分的，冗余备份的持久性的日志服务。Kafka使用场景：1 日志收集：一个公司可以用Kafka可以收集各种服务的log，通过kafka以统一接口服务的方式开放 ...
分类：
其他好文 时间：
2019-07-05 00:26:24
阅读次数：
103
原文:开源日志收集Exceptionless简单使用这两天在研究一个开源的日志收集工具Exceptionless 官网地址：https://exceptionless.com/GitHub地址：https://github.com/exceptionless/Exceptionless 官网为我们提... ...
分类：
其他好文 时间：
2019-06-30 00:07:03
阅读次数：
73
日志 ? K8S系统的组件日志 ? K8SCluster里面部署的应用程序日志 方案一:Node上部署一个日志收集程序 ? DaemonSet方式部署日志收集程序 ? 对本节点/var/log和 /var/lib/docker/containers/ 两个目录下的日志进行采集 方案二:Pod中附加专 ...
分类：
其他好文 时间：
2019-06-29 10:35:00
阅读次数：
95
下载flume： 1.官方网站下载： http://flume.apache.org/download.html 2.百度网盘资源: apache-flume-1.9.0-bin.tar 链接：https://pan.baidu.com/s/1gzTOfiSkvY3nsXap8kj6-Q 提取码：e ...
分类：
Web程序 时间：
2019-06-28 23:02:19
阅读次数：
189
使用ELK Stack收集Kubernetes平台中日志与可视化 K8S系统的组件日志 K8S Cluster里面部署的应用程序日志 日志系统： 启动收集日志的容器（filebeat） 访问kibana，添加index 容器中的日志怎么收集 方式 优点 缺点 方案一：Node上部署一个日志收集程序 ...
分类：
Web程序 时间：
2019-06-25 15:13:05
阅读次数：
199
思考：不放心别人动自己还没有完善的工程代码，是一种什么心理？如何破局这种想法？我这边比较在意的有：对象和方法的命名的（可读性），DTO（等值对象的）的结构易扩展性，代码结构（方法和对象粒度）的可伸缩性（能够方便扩展和简单改写就能执行并行），还有非功能性比如异常的处理，日志收集等；还有一点是健壮性：包 ...
分类：
其他好文 时间：
2019-06-14 12:54:42
阅读次数：
94
