一、远程文件复制将本地主机上的文件实时同步到远程主机上，保证文件或目录内容一致，如Linux常用的rsync就是这类工具，它可监视文件系统的动作，将变化同步到远程主机，只复制变化的内容，对于大文件非常有用，可节省带宽资源，提高效率。二、远程磁盘（卷）镜像存储级的数据..
分类：
其他好文 时间：
2014-07-19 02:41:26
阅读次数：
213
一个网站，除了有数据库，还有很多别的文件，比如用户上传的图片，你的网站代码之类，光有数据库而没有这些文件你的网站也没法跑起来。
和数据库比起来，网站文件要大得多，而且文件数目也多得多，要做到实时同步必须考虑“增量文件同步”，一般传统的方法是使用 inotify + rsync 写脚本来操作。...
分类：
Web程序 时间：
2014-07-18 23:02:58
阅读次数：
262
是不是经常要分析用户的行为？是不是经常遇到多台server上传的日志一起分析？是不是对数据统计的间隔时间要求非常短？还有木有由于日志文件过大，而须要分块处理？1、说明一点在日志写入的时候必须依照一种严格的格式，这样在做解析的时候，才好分割。比方 gameid：123 gameid：2333。分割统一...
分类：
数据库 时间：
2014-07-18 09:33:58
阅读次数：
337
一：问题基于LAN或WAN的网络应用之间进行数据传输或者同步非常普遍，比如远程数据镜像、备份、复制、同步，数据下载、上传、共享等等二：简单解决简单复制会带来较大的带宽，同步或传输时间也会较长三：RSYNC和RDC是两种常见算法，仅仅传输差异数据，并节省带宽四：Rsync算法假设现在有两台计算机Alp...
分类：
其他好文 时间：
2014-07-16 18:07:21
阅读次数：
250
在前面的博文实践记录之-Rsync镜像备份介绍了镜像备份工具Rsync的安装和使用．但在大数据时代，rsync的不足之处也暴露出来．首先．rsync本身实现不了实时备份．靠系统的crontab实现的话也受限于1分钟．因此这就导致了服务端和客户端数据可能出现不一致，更无法在应用故障时做到..
分类：
其他好文 时间：
2014-07-16 16:44:36
阅读次数：
391
# yum install rpm-build# wget http://rsync.samba.org/ftp/rsync/rsync-3.0.9.tar.gz# vim rsync.specName:rsyncVersion:3.0.9Release: 1%{?dist}Summa...
分类：
其他好文 时间：
2014-07-16 15:57:59
阅读次数：
187
转自：http://www.mike.org.cn/blog/index.php?load=read&id=639###pp=0[rsync实现网站的备份，文件的同步，不同系统的文件的同步，如果是windows的话，需要windows版本cwrsync]一、什么是rsync rsync，remot....
分类：
系统相关 时间：
2014-07-16 14:04:20
阅读次数：
412
这篇文章基本介绍全了：http://www.2cto.com/os/201308/238733.html
几点简单备忘：
1. ubuntu下通过apt-get即可安装；
2. 配置文件/etc/rsync.conf默认不存在，需要手动创建；
3. 可以通过守护进程xinetd来启动rsync，在/etc/default/rsync中配置；
4. 服务器在/etc/rsync.pas...
分类：
系统相关 时间：
2014-07-16 09:56:33
阅读次数：
333
Previously, I doubted about possible data transfer errors during file synchronization using rsync. Now, I feel relieved according to the manual:Note t...
分类：
其他好文 时间：
2014-07-15 00:38:37
阅读次数：
330
Rsync（remote synchronize） 是一个远程数据同步工具，可以使用“Rsync算法”同步本地和远程主机之间的文件。
rsync的好处是只同步两个文件不同的部分，相同的部分不在传递。类似于增量备份，
这使的在服务器传递备份文件或者同步文件，比起scp工具要省好多时间。
具体的用法：
1.在本地机器上对两个目录同步
$ rsync -zvr filena...
分类：
其他好文 时间：
2014-07-09 10:39:52
阅读次数：
234
