1.问题描述 需要对日常使用对接口进行出入参数、请求结果、请求耗时、请求关键信息等的记录 2.解决方案 利用注解标示出接口中的关键信息。利用AOP进行方法前后的拦截记录请求入参以及处理结果。利用SPEL解析参数中的关键信息 考虑点：1.各个接口的参数都不一致。自己想要的关键信息可能包含在入参中，也可 ...
分类：
其他好文 时间：
2019-06-13 22:07:17
阅读次数：
141
问题导读： 1.zookeeper在kafka的作用是什么？ 2.kafka中几乎不允许对消息进行“随机读写”的原因是什么？ 3.kafka集群consumer和producer状态信息是如何保存的？ 4.partitions设计的目的的根本原因是什么？ 一、入门 1、简介 Kafka is a d ...
分类：
其他好文 时间：
2019-06-12 19:52:22
阅读次数：
88
为什么用到ELK： 一般我们需要进行日志分析场景：直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中，此方法效率低下，面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理，所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集 ...
分类：
其他好文 时间：
2019-06-10 13:25:10
阅读次数：
105
replica副本同步机制 1 前言 Kafka的流行归功于它设计和操作简单、存储系统高效、充分利用磁盘顺序读写等特性、非常适合在线日志收集等高吞吐场景。 Kafka特性之一是它的复制协议。复制协议是保障kafka高可靠性的关键。对于单个集群中每个Broker不同工作负载情况下，如何自动调优Kafk ...
分类：
其他好文 时间：
2019-06-09 18:08:58
阅读次数：
117
参考文档https://yq.aliyun.com/articles/679721https://www.cnblogs.com/keithtt/p/6410249.htmlhttps://github.com/kiwigrid/helm-charts/tree/master/charts/fluentd-elasticsearchhttps://github.com/kubernetes/kub
分类：
Web程序 时间：
2019-06-07 09:21:25
阅读次数：
185
ELK（elasticsearch、logstash、kibana）可以作为日志收集及分析的一整套系统，通过阿里的普及也有越来越多的公司在使用，使用下来功能还可以，这里整理记录一个部署手册。 为了方便，将ELK都部署在一台os里。 一、环境准备 操作系统：centos7（CentOS-7-x86_6 ...
分类：
其他好文 时间：
2019-06-06 19:26:45
阅读次数：
101
容器日志样例172.101.32.1 - - [03/Jun/2019:17:14:10 +0800] "POST /ajaxVideoQueues!queryAllUser.action?rnd=1559553110429 HTTP/1.0" 200 65 "http://www.wsjy.gsz... ...
分类：
其他好文 时间：
2019-06-04 19:37:10
阅读次数：
127
原文:asp.Net Core免费开源分布式异常日志收集框架Exceptionless安装配置以及简单使用图文教程最近在学习张善友老师的NanoFabric 框架的时了解到Exceptionless : https://exceptionless.com/ ！因此学习了一下这个开源框架！下面对Exc... ...
分类：
Web程序 时间：
2019-05-29 23:28:26
阅读次数：
169
1、Hadoop生态概况Hadoop是一个由Apache基金会所开发的分布式系统集成架构，用户可以在不了解分布式底层细节情况下，开发分布式程序，充分利用集群的威力来进行高速运算与存储，具有可靠、高效、可伸缩的特点Hadoop的核心是YARN,HDFS,Mapreduce,常用模块架构如下2、HDFS源自谷歌的GFS论文，发表于2013年10月，HDFS是GFS的克隆版，HDFS是Hadoop体系中
分类：
其他好文 时间：
2019-05-28 12:54:25
阅读次数：
145
#__author__="G"#date: 2019/4/24import loggingfrom week_9.common import contantsfrom week_9.common.config import config # 新建一个日志收集器：getLogger() 新建一个收集器 ...
分类：
其他好文 时间：
2019-05-24 00:45:22
阅读次数：
102
