一、远程文件复制将本地主机上的文件实时同步到远程主机上,保证文件或目录内容一致,如Linux常用的rsync就是这类工具,它可监视文件系统的动作,将变化同步到远程主机,只复制变化的内容,对于大文件非常有用,可节省带宽资源,提高效率。二、远程磁盘(卷)镜像存储级的数据..
分类:
其他好文 时间:
2014-07-19 02:41:26
阅读次数:
213
首先建立站点,httpd或nginx都可,我的站点根目录指向“/var/www/centos/”然后下载源,并同步源rsync-avrtrsync://mirrors.ustc.edu.cn/centos/6.5/updates/x86_64//opt/centos/other/updates/rsync-avrtrsync://mirrors.ustc.edu.cn/centos/6.5/extras/x86_64//opt/centos/ot..
分类:
其他好文 时间:
2014-07-19 02:23:45
阅读次数:
162
一个网站,除了有数据库,还有很多别的文件,比如用户上传的图片,你的网站代码之类,光有数据库而没有这些文件你的网站也没法跑起来。
和数据库比起来,网站文件要大得多,而且文件数目也多得多,要做到实时同步必须考虑“增量文件同步”,一般传统的方法是使用 inotify + rsync 写脚本来操作。...
分类:
Web程序 时间:
2014-07-18 23:02:58
阅读次数:
262
是不是经常要分析用户的行为?是不是经常遇到多台server上传的日志一起分析?是不是对数据统计的间隔时间要求非常短?还有木有由于日志文件过大,而须要分块处理?1、说明一点在日志写入的时候必须依照一种严格的格式,这样在做解析的时候,才好分割。比方 gameid:123 gameid:2333。分割统一...
分类:
数据库 时间:
2014-07-18 09:33:58
阅读次数:
337
一:问题基于LAN或WAN的网络应用之间进行数据传输或者同步非常普遍,比如远程数据镜像、备份、复制、同步,数据下载、上传、共享等等二:简单解决简单复制会带来较大的带宽,同步或传输时间也会较长三:RSYNC和RDC是两种常见算法,仅仅传输差异数据,并节省带宽四:Rsync算法假设现在有两台计算机Alp...
分类:
其他好文 时间:
2014-07-16 18:07:21
阅读次数:
250
在前面的博文实践记录之-Rsync镜像备份介绍了镜像备份工具Rsync的安装和使用.但在大数据时代,rsync的不足之处也暴露出来.首先.rsync本身实现不了实时备份.靠系统的crontab实现的话也受限于1分钟.因此这就导致了服务端和客户端数据可能出现不一致,更无法在应用故障时做到..
分类:
其他好文 时间:
2014-07-16 16:44:36
阅读次数:
391
# yum install rpm-build# wget http://rsync.samba.org/ftp/rsync/rsync-3.0.9.tar.gz# vim rsync.specName:rsyncVersion:3.0.9Release: 1%{?dist}Summa...
分类:
其他好文 时间:
2014-07-16 15:57:59
阅读次数:
187
转自:http://www.mike.org.cn/blog/index.php?load=read&id=639###pp=0[rsync实现网站的备份,文件的同步,不同系统的文件的同步,如果是windows的话,需要windows版本cwrsync]一、什么是rsync rsync,remot....
分类:
系统相关 时间:
2014-07-16 14:04:20
阅读次数:
412
这篇文章基本介绍全了:http://www.2cto.com/os/201308/238733.html
几点简单备忘:
1. ubuntu下通过apt-get即可安装;
2. 配置文件/etc/rsync.conf默认不存在,需要手动创建;
3. 可以通过守护进程xinetd来启动rsync,在/etc/default/rsync中配置;
4. 服务器在/etc/rsync.pas...
分类:
系统相关 时间:
2014-07-16 09:56:33
阅读次数:
333
Previously, I doubted about possible data transfer errors during file synchronization using rsync. Now, I feel relieved according to the manual:Note t...
分类:
其他好文 时间:
2014-07-15 00:38:37
阅读次数:
330