Linux下rsync+inotify的实时文件自动同步 注:本博文接着上一章的rync博文的环境下进程配置的 背景:随着时代的发展,手工的同步文件的功能已经不适合为高效的现代化企业的服务了。 rsync的局限性: 1、对于大的文件(百万级、千万级的)同步耗时。2、不能实时的检测,rsync是根据L ...
分类:
系统相关 时间:
2017-12-07 10:51:11
阅读次数:
266
rsync+inotify:
随着应用系统规模的不断扩大,对数据的安全性和可靠性也提出的更好的要求,rsync在高端业务系统中也逐渐暴露出了很多不足,首先,rsync同步数据时,需要扫描所有文件后进行比对,进行差量传输。如果文件数量达到了百万甚至千万量级,扫描所有文件将是非常耗时的。而且正在发生变化的往往是其中很少的一部分,这是非常低效的方式。其次,rsync不能实时的去监测、同步数据,虽然它可以通过linux守护进程的方式进行触发同步,但是两次触发动作一定会有时间差,这样就导致了服务端和客户端数据可能出现不一致,无法在应用故障时完全的恢复数据。基于以上原因,rsync+inotify组合出现了!
分类:
其他好文 时间:
2017-11-28 21:06:29
阅读次数:
225
一、概述 1、Rsync+Sersync 是什么? 1)Sersync使用c++编写基于inotify开发的触发机制; 2)Sersync可以监控所监听的目录发生的变化(包括新建、修改、删除),具体到一个文件名或目录名,然后触发rsync同步,只同步发生改变的文件或目录。如果只是目录下的文件发生变化 ...
分类:
其他好文 时间:
2017-11-21 18:48:05
阅读次数:
156
简介起因因公司全部迁云,配置ECS时需要将Web集群之间配置数据同步以及会话保持,接下来配置在linuxCentos7.4版本的系统操作。优点使用rsync工具和inotify机制相结合,可以实现触发式部署(实时同步),只要原始(主)位置的文档发生变幻,则立即启用增量推送操作,否则处于静态等..
分类:
其他好文 时间:
2017-11-15 17:02:39
阅读次数:
217
前言 学习shell脚本编程需要的知识储备: vi/vim编辑器命令 vimrc设置要熟练 基础命令,100多个要熟练 基础和常用的网络服务命令要会:nfs 、 rsync、 inotify 、 lanmp 、 sersync 、ssh key 一、shell脚本概念及示例 1、什么是shell S ...
分类:
系统相关 时间:
2017-10-30 14:24:45
阅读次数:
238
1.1inotify介绍inotify是一种强大的、细粒度的、异步的文件系统事件控制机制。linux内核从2.6.13起,加入了inotify支持,通过inotify可以监控文件系统中添加、删除、修改、移动等各种事件,利用这个内核接口,第三方软件就可以监控文件系统下文件的各种变化情况,而inotify-too..
分类:
其他好文 时间:
2017-10-25 23:40:41
阅读次数:
140
实时同步rsync+inotify 原创博文http://www.cnblogs.com/elvi/p/7658071.html ...
分类:
其他好文 时间:
2017-10-23 18:33:20
阅读次数:
244
rsync有很多种实现实时同步的方式,这里采用inotify-tools监控文件的状态触发rsync进行不同。目标服务器(同步到哪儿)监听rsync(daemon方式)作为服务器端,源客户端(从哪儿同步)采用inotify+rsync进行推送同步。1.目标服务器安装rsync服务wgethttps://download.samba.org/pu..
分类:
其他好文 时间:
2017-10-22 16:55:18
阅读次数:
147
原文:http://lxw66.blog.51cto.com/5547576/1331048 声明:rsync inotify 需要逆向思考,当只做rsync不实时同步时,我们一般是从rsync服务端向rsync客户端同步数据。当需要添加inotify实现实时同步数据时,我们就需要从rsync客户端 ...
分类:
其他好文 时间:
2017-10-15 14:29:29
阅读次数:
172