重复数据删除（de-duplication）是存储领域，尤其是数据备份领域的一个非常重要的概念。其目的是删除重复的数据块，从而减少对存储空间的使用。这种想法的出发点是非常自然的。通常情况下，每次备份的数据总是会有一部分跟上一次备份的数据重合。比如，每次备份都要包含一个100..
分类：
其他好文 时间：
2014-09-12 19:20:14
阅读次数：
219
需求：两台服务器（A、B），在服务器A上存放着大量的图片，需要在每天夜里三点同步到服务器B，源目录和目的目录都是/p_w_picpath启用程序：rsync服务器A上的配置：1、/etc/rsyncd.confuid=nobodygid=nobodyusechroot=nomaxconnectionts=6readonly=yeshostsallow=192.168.95.0/2..
分类：
其他好文 时间：
2014-09-12 15:18:54
阅读次数：
140
一、安装和启动SSH协议sudo yum install ssh sudo yum install rsyncservice sshd restart 启动服务（rsync是一个远程数据同步工具，可通过LAN/WAN快速同步多台主机间的文件）确保所有的服务器都安装，上面命令执行完毕，各台机器之间可以...
分类：
其他好文 时间：
2014-09-12 08:50:23
阅读次数：
422
最新的hadoop2.5 安装目录做了一定修改，安装变得稍微简单一点
首先安装准备工具
$ sudo apt-get install ssh
$ sudo apt-get install rsync
配置ssh
$ ssh localhostIf you cannot ssh to localhost without a passphrase, execute the...
分类：
其他好文 时间：
2014-09-10 19:34:21
阅读次数：
201
规划：1、使用lvs的nat模型，负载均衡两台Discuz服务器。2、Discuz服务器的数据共享解决方案：部署Discuz!论坛程序要解决两大问题：(1)、用户上传的附件属于非结构化的数据要保存在文件系统中。要解决两台提供Discuz!论坛服务的附件共享问题： (A)、当用户上传附件时通过地址重..
分类：
其他好文 时间：
2014-09-10 02:51:10
阅读次数：
420
步骤 1、mount /dev/sr0 /media/ 2、安装所需要的软件 安装并配置tftp服务 yum install tftp tftp-server vsftpd dhcp syslinux nfs-utils
vim /etc/xinetd.d/tftp
service tftp
{
disable = no
...
分类：
其他好文 时间：
2014-09-09 16:23:29
阅读次数：
310
远程访问linuxde工具有很多，这里我写两个。分别是telnet和ssh。A.telnet服务器配置1.yuminstalltelnet和yuminstalltelnet-server安装telnet服务器2.vim/etc/xinetd.d/telnet编辑telnet的配置文件3.找到disable=yes将yes改成no4.serverxinetdstart开启telnet服务器5.到window系..
分类：
系统相关 时间：
2014-09-09 13:50:09
阅读次数：
284
rsync常用选项
-a：归档模式，相当于-rlptgoD
-v：显示同步过程详细信息
-z：传输过程中启用压缩
-H：保留硬连接文件
-A：保留文件的ACL属性信息
--delete：删除目标有而源没有的文件
--checksum：根据校验和来决定是否要同步1.发布rsync--daemon共享
1）建立同步账号文件（匿..
分类：
其他好文 时间：
2014-09-09 13:47:08
阅读次数：
182
1.使用ssh-keygen生成秘钥现在我们来设置ssh,以便在执行ssh操作时不需要密码，使用ssh-keygen在本地生成公钥和私钥。$ ssh-keygenEnter passphrase (empty for no passphrase):Enter same passphrase agai...
分类：
其他好文 时间：
2014-09-08 10:51:06
阅读次数：
315
rsync+inotify实时数据同步单目录实战rsync+inotify实时数据同步单目录实战inotify是一个强大的、细粒度的、异步的文件系统事件监控机制，linux内核从2.6.13起加入了inotify支持，通过inotify可以监控文件系统中添加、删除、修改、移动等各种事件，利用这个内核...
分类：
其他好文 时间：
2014-09-07 21:08:55
阅读次数：
260
