前面说了Java8的流，这里还说流处理，既然是流，比如水流车流，肯定得有流的源头，源可以有多种，可以自建，也可以从应用端获取，今天就拿非常经典的Kafka做源头来说事，比如要来一套应用日志实时分析框架，或者是高并发实时流处理框架，正是Kafka的拿手好戏。 环境：Idea2019.03/Gradle ...
分类：
其他好文 时间：
2019-12-16 19:31:26
阅读次数：
178
文 |齐光性能问题和 Bug 不同，后者的分析和解决思路更清晰，很多时候从应用日志（文中的应用指分布式服务下的单个节点）即可直接找到问题根源，而性能问题，其排查思路更为复杂一些。对应用进行性能优化，是一个系统性的工程，对工程师的技术广度和技术深度都有所要求。一个简单的应用，它不仅包含了应用代码本身， ...
分类：
其他好文 时间：
2019-12-16 13:19:41
阅读次数：
109
主要内容 1 ELK概念 2 K8S需要收集哪些日志 3 ELK Stack日志方案 4 容器中的日志怎么收集 5 K8S平台中应用日志收集 准备环境 一套正常运行的k8s集群，kubeadm安装部署或者二进制部署即可 |ip地址 |角色 |备注| | | : : | : : | 192.168.7 ...
分类：
Web程序 时间：
2019-12-05 23:57:05
阅读次数：
240
日志介绍 日志： 历史事件:时间，地点，人物，事件 日志级别：事件的关键性程度，Loglevel 系统日志服务：sysklogd :CentOS 5之前版本 syslogd: system application 记录应用日志 klogd: linux kernel 记录内核日志 事件记录格式： 日 ...
分类：
其他好文 时间：
2019-12-01 23:07:31
阅读次数：
205
收集系统其它服务日志，在客户端node1 上操作，示例以openstack-nova 服务的日志为例： 1.先修改配置文件 /etc/rsyslog.conf，完整内容如下： [root@node1 ~]# egrep -v '^#|^$' /etc/rsyslog.conf $ModLoad im ...
分类：
其他好文 时间：
2019-11-28 13:32:01
阅读次数：
169
日常工作中，我们多少都会遇到应用的性能问题。在阿里面试中，性能优化也是常被问到的题目，用来考察是否有实际的线上问题处理经验。面对这类问题，阿里工程师齐光给出了详细流程。来阿里面试前，先看看这篇文章哦。 性能问题和Bug不同，后者的分析和解决思路更清晰，很多时候从应用日志（文中的应用指分布式服务下的单 ...
分类：
其他好文 时间：
2019-11-28 13:01:50
阅读次数：
55
Tags：k8s环境下的容器日志收集K8S环境下面如何收集应用日志在本文中重点讲一下K8S容器环境中如何收集容器的日志；1.容器日志收集方案的选择：??在K8S集群中，容器的日志收集方案一般有三种；第一种方案是通过在每一个k8s节点安装日志收集客户端软件，比如fluentd。这种方案不好的一点是应用的日志必须输出到标准输出，并且是通过在每一台计算节点的/var/log/co
分类：
其他好文 时间：
2019-11-24 09:50:35
阅读次数：
77
[TOC] 一、存储引擎 1.什么是存储引擎？ mysql中建立的库=== 文件夹 库中建立的表=== 文件 现实生活中我们用来存储数据的文件有不同的类型，每种文件类型对应各自不同的处理机制：比如处理文本用txt类型，处理表格用excel，处理图片用png等 数据库中的表也应该有不同的类型，表的类型 ...
分类：
数据库 时间：
2019-11-04 00:07:01
阅读次数：
92
Spring Boot Logback配置日志 出于性能等原因，Logback 目前是springboot应用日志的标配； 当然有时候在生产环境中也会考虑和三方中间件采用统一处理方式。@pdai "Spring Boot Logback配置日志" "配置时考虑点" "实现范例" "综合范例" "在配 ...
分类：
编程语言 时间：
2019-10-30 13:42:19
阅读次数：
116
日志分割**随着网站的访问量增加，默认情况Apache单个日志文件也会越来越大***日志文件占用磁盘空间很大*查看相关信息不方便**对日志文件进行分割***Apache自带rotatelogs分割工具实现*第三方工具cronolog分割rotatelogs分割工具配置网站的日志文件转交给rotatelogs分割处理配置格式为ErrorLog"|rotatelogs命令的绝对路径-l日志文
分类：
Web程序 时间：
2019-10-25 11:40:59
阅读次数：
114
