错误日志(log_error) 记录启动\关闭\日常运行过程中,状态信息,警告,错误 默认就是开启的: /数据路径下/hostname.err 配置: 查看方式 binlog(binary logs):二进制日志 作用 (1)备份恢复必须依赖二进制日志 (2)主从环境必须依赖二进制日志 binlog ...
分类:
数据库 时间:
2019-12-29 13:06:56
阅读次数:
81
Flume采集的控制台提示:The channel is full or unexpected failure. The source will try again after 1000 ms 这个是因为当前被采集的文件过大,深层的原因是文件采集的速度和sink的速度没有匹配好。所以应该可以通过增大 ...
分类:
其他好文 时间:
2019-12-28 22:41:20
阅读次数:
335
1)Source中使用拦截器 kafka_key.sources.sources1.interceptors = i1kafka_key.sources.sources1.interceptors.i1.type = com.bigdata.flume.MyInterceptor$Builder k ...
分类:
Web程序 时间:
2019-12-28 22:35:37
阅读次数:
181
一、日志的概念 什么是日志?日志就是历史事件。历史事件包括时间、地点、人物、时间。这个是生活中所说的日志很好理解。在Linux中也有类似的服务,它主要作用就是记录Linux系统的历史事件,包括什么时间什么服务或者那个进程或者pid发生的一些事件,通过记录发生的事件,我们可以查看日志来了解在过去的一段 ...
分类:
系统相关 时间:
2019-12-25 01:33:01
阅读次数:
203
Flume和 Sqoop Sqoop简介 Sqoop是一种旨在有效地在Apache Hadoop和诸如关系数据库等结构化数据存储之间传输大量数据的工具 原理: 将导入或导出命令翻译成Mapreduce程序来实现。 在翻译出的Mapreduce中主要是对InputFormat和OutputFormat ...
分类:
Web程序 时间:
2019-12-21 22:39:42
阅读次数:
187
内容小结 monkey monkey安装启动 monkey事件 monkey命令参数 monkey脚本运行 monkey日志管理 monkeyrunner安装启动 monkeyrunnerApI monkeyrunner 脚本编写 元素定位依赖于坐标点,稳定性差 不支持跨平台使用(iOS平台无法使用 ...
分类:
其他好文 时间:
2019-12-19 18:50:12
阅读次数:
74
一、nginx日志管理 Nginx访问日志主要有两个参数控制 1) log_format #用来定义记录日志的格式(可以定义多种日志格式,取不不同名字即可) log_format log_name string 2) access_log #用来指定日至文件的路路径及使用的何种日志格式记录日志 ac ...
分类:
其他好文 时间:
2019-12-17 20:49:45
阅读次数:
97
mysql数据库章节导航 "mysql5.7的安装(yum和二进制安装)" "数据库的基本操作" "索引" "权限管理" "日志管理" "逻辑备份mysqldump" "物理备份:xtrabackup" "主从复制 传统方式" "主从复制 Gtid方式" ...
分类:
数据库 时间:
2019-12-17 18:18:49
阅读次数:
77
nginx的访问日志管理 ①使用log_format定义日志格式 例如: vim /etc/nginx/nginx.conf ##日志格式的定义在nginx的主配置文件 log_format main '$remote_addr - $remote_user [$time_local] "$requ ...
分类:
其他好文 时间:
2019-12-13 19:30:23
阅读次数:
103
日志管理 学习目标 1. 清楚日志在系统中的作用 2. 能够看懂rsyslog基本配置项的含义 3. 知道系统保存日志的位置 4. 能够自己动手配置日志服务器 一、日志介绍 1. 日志概念 日志是系统用来记录系统运行时候的一些相关信息文本文件 2. 日志作用 日志是为了保存相关程序的运行状态、错误信 ...
分类:
系统相关 时间:
2019-12-09 11:46:32
阅读次数:
125