Linux-日志管理 日志的AAA认证： Authentication 认证 Authorization 授权 Account Audit 审计 dmesg 查看与系统启动有关的日志 [root@localhost ~]# dmesg [ 0.000000] Linux version 4.18.0 ...
分类：
系统相关 时间：
2020-12-22 11:56:40
阅读次数：
0
0、题记实际业务场景中，会遇到基础数据存在Mysql中，实时写入数据量比较大的情景。迁移至kafka是一种比较好的业务选型方案。而mysql写入kafka的选型方案有：方案一：logstash_output_kafka插件。方案二：kafka_connector。方案三：debezium插件。方案四：flume。方案五：其他类似方案。其中：debezium和flume是基于mysqlbinlog实
分类：
数据库 时间：
2020-12-15 12:34:47
阅读次数：
9
从端口读数据读取到本地文件 #1.给三个组件命名 a3.sources = r1 a3.channels = c1 a3.sinks = k1 #2.给source组件属性赋值 a3.sources.r1.type = avro a3.sources.r1.bind = hadoop102 a3.s ...
分类：
Web程序 时间：
2020-12-14 12:51:33
阅读次数：
7
1）配置flume(flume-kafka.conf) # define a1.sources = r1 a1.sinks = k1 a1.channels = c1 # source a1.sources.r1.type = exec a1.sources.r1.command = tail -F ...
分类：
Web程序 时间：
2020-11-30 15:35:17
阅读次数：
9
一.日志管理简介 1.什么是日志 系统日志是记录系统中硬件、软件和系统问题的信息，同时还可以监视系统中发生的事件。用户可以通过它来检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。系统日志包括系统日志、应用程序日志和安全日志。 2.日志服务 在CentOS6.x中日志服务已经由rsyslogd ...
分类：
其他好文 时间：
2020-11-21 12:42:29
阅读次数：
29
简介 Tomcat 的 catalina.out 日志默认只要不停服务器就一直存，导致文件很大出现问题难以排查，所以要调整 catalina.out 的备份机制，每天备份一次。 方式一 Tomcat 改用 Log4j tomcat 修改默认 java 的日志管理为 log4j，但好像只支持 tomc ...
分类：
其他好文 时间：
2020-11-16 13:45:07
阅读次数：
10
Flume概述官方文档：https://flume.apache.org/documentation.htmlFlume是一种分布式、高可靠和高可用的日志数据采集服务，可高效地收集、聚合和移动大量日志数据。它具有一种基于流数据的简单且灵活的体系结构。它具有健壮性和容错性，具有可调整的可靠性机制和许多故障切换和恢复机制。它使用一个简单的可扩展数据模型，允许在线分析应用程序。Flume架构及核心组件F
分类：
Web程序 时间：
2020-11-08 16:36:50
阅读次数：
26
Haproxy搭建Web群集技术 一、常见的Web集群调度器 二、Haproxy应用分析 三、Haproxy调度算法原理 3.1、RR（Round Robin） 3.2、LC（Least Connections） 3.3、SH（Source Hashing） 3.4、Haproxy配置文件详解 3. ...
分类：
Web程序 时间：
2020-11-07 16:11:27
阅读次数：
23
详解,日志管理工具: journalctl 和用法
分类：
其他好文 时间：
2020-11-06 01:32:13
阅读次数：
13
葵花宝典 flume 1. Flume组成，Put事务，Take事务 2. Flume拦截器 3. Flume Channel选择器 4. Flume监控器 5. Flume采集数据会丢失吗?（防止数据丢失的机制） 6. Flume内存 7. FileChannel优化 1. Flume组成，Put ...
分类：
Web程序 时间：
2020-10-29 10:09:33
阅读次数：
36
