Checkpoint机制 NameNode负责管理元数据,元数据存在内存中,但在磁盘上有元数据镜像文件FSimage和操作日志文件edits 内存中的元数据和磁盘镜像文件有状态差,状态差体现在操作日志文件中 SecondaryNameNode会定期将NameNode上的操作日志文件下载到本地,跟上一 ...
分类:
其他好文 时间:
2020-07-22 01:46:07
阅读次数:
87
1.虚拟机(hadoop11)中的hadoop如是第一次启动,则需要格式化namenode 命令: hadoop namenode -format 注意:如之前有安装过,则需要删除配置文件core-site.xml里的hadoop.tmp.dir的存储目录及日志文件夹 2.在hadoop11上启动n ...
分类:
其他好文 时间:
2020-07-21 21:36:10
阅读次数:
66
在Linux环境执行定时脚本时,创建完脚本后,可以使用crontab进行编辑定时任务,并设置时间定时执行,下面就为大家详细的展示从创建脚本到设定定时任务的流程。 一、首先创建并编辑一个定时脚本 输入以下命令:touch clean.sh 创建脚本,这里我创建的是一个定时清理日志文件的定时脚本。 记得 ...
分类:
系统相关 时间:
2020-07-21 13:48:59
阅读次数:
92
Andriod手机无故关机重启:安卓6.0 1.尝试查看日志 adb logcat >d:\logcat.log 日志文件太大 2.adb logcat -v threadtime -r 4096 -b events >d:\events.log 输出信息如下 watchdog 电池信息 logca ...
分类:
其他好文 时间:
2020-07-20 22:59:47
阅读次数:
109
导航 (返回顶部) 1. linux日志分类 2. 日志文件目录 3. 转储配置文件 4. 更多相关链接 5. proc目录(原文摘录) 6. 日志恢复(原文摘录) 1. linux日志分类 2. 日志文件目录 3. 转储配置文件 4. 更多相关链接 5. proc目录(原文摘录) 6. 日志恢复( ...
分类:
系统相关 时间:
2020-07-20 22:52:59
阅读次数:
126
Docker容器命令1.docker运行(创建)容器命令2. docker查看容器命令3. docker退出容器命令4. docker启动容器命令5. docker重启容器命令6. docker停止容器命令7. docker删除容器命令8. docker进入容器命令9. docker查看容器日志10 ...
分类:
其他好文 时间:
2020-07-18 22:36:57
阅读次数:
82
后台不挂断运行程序: nohup your_command & 同时指定输出日志文件并将错误重定向到标准输出: nohup your_command > your_out.file 2>&1 & 查看进程 ps -ef | grep "your_command" 杀死进程 kill -9 your_ ...
分类:
系统相关 时间:
2020-07-16 10:15:38
阅读次数:
95
我们知道Logstash的架构如下: 它的整个pipleline分为三个部分: input插件:提取数据。 这可以来自日志文件,TCP或UDP侦听器,若干协议特定插件(如syslog或IRC)之一,甚至是排队系统(如Redis,AQMP或Kafka)。 此阶段使用围绕事件来源的元数据标记传入事件。 ...
分类:
其他好文 时间:
2020-07-15 23:00:31
阅读次数:
84
一、审计服务(audit) 1.1 审计服务介绍 auditd(或 auditd 守护进程)是Linux审计系统中用户空间的一个组件,其负责将审计记录写入磁盘。Auditd可以对整个操作系统的以下行为做审计: 账户管理、文件系统管理、权限管理、网络配置管理、日志文件操作管理 auditd安装完毕后将 ...
分类:
其他好文 时间:
2020-07-15 22:48:27
阅读次数:
88
在实际生产环境中有时会出现误删数据的情况,Binlog日志,即二进制日志文件,用于记录用户对数据库操作的SQL语句信息,当发生数据误删除的时候我们可以通过binlog日志来还原已经删除的数据,还原数据的方法分为传统二进制文件还原数据。
分类:
数据库 时间:
2020-07-15 13:10:59
阅读次数:
80