前言 最近做了一个不大不小的项目,现就删繁就简单独拿出来web集群这一块写一篇博客。数据库集群请参考《MySQL集群架构篇:MHA+MySQL-PROXY+LVS实现MySQL集群架构高可用/高性能-技术流ken》下面是项目的一些简单介绍。 WEB集群项目简介 随着网站访问量的激增,势必会导致网站的 ...
分类:
Web程序 时间:
2018-11-16 15:09:46
阅读次数:
318
业务场景:将所有服务器内的日志文件以小时为单位压缩后保存同时清空源日志文件。此后通过rsync+inotify机制将压缩文件统一备份到日志服务器内。实现对日志文件的统一保存和备份。rsync和inotify这里就不介绍了!有兴趣的可以到官网查看。大致服务架构图:一、三台机器的IP分别为:源服务器:172.20.2.108目标(备份)服务器:172.20.2.225@todo:从源服务器(172.2
分类:
其他好文 时间:
2018-11-09 19:26:25
阅读次数:
289
Rsync用来实现触发式的文件同步。inotify-tools是一套组件,Linux内核从2.6.13版本开始提供了inotify通知接口,用来监控文件系统的各种变化情况,如文件存取、删除、移动等。利用这一机制,可以非常方便地实现文件异动告警、增量备份,并针对目录或文件的变化及时作出响应;所以使用i ...
分类:
其他好文 时间:
2018-10-11 21:43:22
阅读次数:
130
一、rsync(一)、rsync简介rsync是Linux和Unix下一款远程数据同步工具,rsync第一次会把数据全量同步到远端服务器,之后会对比两个文件的不同,传输差异文件,实现增量同步优点:安全性高、备份迅速,使用同步算法,只同步有变化的文件备份文件保持原有文件的属性软硬连接,且支持排除备份等缺点:在数据同步之前需要扫描所有的文件进行对比才能进行差异化同步,如果同步文件达到百万级或者千万级,
分类:
其他好文 时间:
2018-10-02 22:25:02
阅读次数:
331
1.rsync简介 “rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步,支持本地复制,或者与其他SSH、rsync主机同步” 2.rsync的功能和特点 1. 可以实现服务器各种资源的备份(可以夸文件系统) 2. linux-rsync,wind ...
分类:
其他好文 时间:
2018-10-02 17:31:49
阅读次数:
237
Rsync 是一个开源的快速备份工具,可以在不同主机之间镜像同步整个目录树,支持增量备份,保持链接和权限,且采用优化的同步算法,在传输钱执行压缩,因此非常适用于异地备份、镜像服务器等应用。
inotify是一种强大的、细粒度的、异步的文件系统事件监控机制,Linux内核从2.6.13起,加入了inotify支持,通过Inotify可以监控文件系统中添加、删除,修改、移动等各种细微事件,利用这个内核接口,第三方软件就可以监控文件系统下文件的各种变化情况,而inotify-tools就是这样的一个第三方软件。
分类:
其他好文 时间:
2018-10-01 00:18:29
阅读次数:
207
1.部署rsync=inotify同步/etc目标服务器的/wzy/下。实验环境:|主机名称|操作系统|角色|ip地址||---@bogon---|---RHEL7---|----源服务器-----|192.168.168.37||@client|RHEL7|目标服务器|192.168.43.199*关闭防火墙和selinux[root@client~]#systemctlstartfirewal
分类:
其他好文 时间:
2018-09-21 11:39:04
阅读次数:
197
结合inotify特性,实时监控文件系统变化,实时rsync备份同步
分类:
其他好文 时间:
2018-09-17 19:30:37
阅读次数:
154
随着应用系统规模的不断扩大,对数据的安全性和可靠性也提出的更好的要求,rsync在高端业务系统中也逐渐暴露出了很多不足。首先,rsync在同步数据时,需要扫描所有文件后进行比对,进行差量传输。如果文件数量达到了百万甚至千万量级,扫描所有文件将是非常耗时的,并且正在发生变化的往往是其中很少的一部分,这 ...
分类:
其他好文 时间:
2018-09-14 11:58:17
阅读次数:
173