说明：1、Rsync服务端系统：CentOS5.5IP地址：192.168.21.160数据存放目录：/data/xuersync2、cwRsync客户端系统：WindowsServer2003IP地址：192.168.21.130同步的目录：D:\xuersync实现目的：cwRsync客户端每天凌晨3:00钟自动同步Rsync服务端/data/xuersync目录中的数据到D:\x..
在之前的博文中提到，hive的表数据是可以同步到impala中去的。一般impala是提供实时查询操作的，像比较耗时的入库操作我们可以使用hive，然后再将数据同步到impala中。另外，我们也可以在hive中创建一张表同时映射hbase中的表，实现数据同步。
下面，笔者依次进行介绍。一、impala与hive的数据同步首先，我们在hive命令行执行show databases;可以看到有以下几个...
分类：
其他好文 时间：
2016-04-07 07:13:48
阅读次数：
266
rsync（remotesync）是类ulinux系统中的一款远程数据同步工具，使用所谓的“rsync算法”来使本地和远程主机之间的文件达到同步（也可在同一主机内部实现数据同步），这个算法只传送两个文件的不同部分，而不是每次都整份传送，因此速度很快。rsync同步数据时，需要扫描所有文件..
分类：
其他好文 时间：
2016-02-28 01:03:39
阅读次数：
238
server（192.168.2.82）:1、服务器客户端之间免密码登录ssh-keygen -t rsa(一直enter结束)cd /root/.sshscp id_rsa.pub root@192.168.2.39:~/.ssh/authorized_keys 验证：ssh 192.168.2....
分类：
其他好文 时间：
2015-11-19 12:37:11
阅读次数：
146
第三章rsync通过远程ssh实现数据备份通过远程shell访问，实现数据同步备份拉--即将远程服务器上的数据同步到本地服务器上。推--即将本地服务器上的数据同步到远程服务器上。语法格式：拉操作==》rsync选项用户名@备份源服务器IP地址：备份源目录目标目录推操作==》rsync选项备..
分类：
其他好文 时间：
2015-10-14 21:54:27
阅读次数：
206
一、比较原始的方案：触发器/Job/快照+dblink的方式，可实现同步和定时刷新；二台不同的数据库服务器，从一台数据库服务器A的一个用户读取另一台数据库服务器B下某个用户的数据，可以通过dblink来完成。二、通过物化视图定时刷新来实现数据同步。物化视图刷新方式有增量刷新和完全刷新两种模式；三、高...
分类：
数据库 时间：
2015-10-09 22:40:54
阅读次数：
286
rsyncd用来同步2台机器上的操作来保证数据的一致，inotify用来检测系统的变化，利用rsync+inotify来实现实时同步s:192.168.1.234路径：/usr/local/nginx-1.6.3/html/home/paixian/rootc:192.168.1.136路径：/data/paixian/root1.服务器上的操作yuminstallrsyncxinetd-y///下载..
分类：
其他好文 时间：
2015-09-11 06:55:16
阅读次数：
273
一、原理mysql主服务器把各种操作已二进制的格式记录到bin-log里，从连接主，并读取bin-log，实现数据同步备份：mysqldump-uroot-p123456db>1.sql导入：mysql-uroot-p123456db<1.sql二、准备工作然后导出主的mysql库数据然后导入给db1mysqldump-uroot-S/tmp/mysql2.sockm..
分类：
数据库 时间：
2015-09-01 00:00:07
阅读次数：
548
一、原理mysql主服务器把各种操作已二进制的格式记录到bin-log里，从连接主，并读取bin-log，实现数据同步备份：mysqldump-uroot-p123456db>1.sql导入：mysql-uroot-p123456db<1.sql二、准备工作然后导出主的mysql库数据然后导入给db1mysqldump-uroot-S/tmp/mysql2.sockm..
分类：
数据库 时间：
2015-08-14 19:36:11
阅读次数：
215
事务的功能在sqlserver中由来已久，因为最近在做一个数据同步方案，所以有机会再次研究一下它以及快照等，发现还是有很多不错的功能和改进的。这里以sqlserver2008的事务发布功能为例，对发布订阅的方式简要介绍一下操作流程，一方面做个总结备份，一方面与大家进行一下分享和交流。费话就不多说了，...
分类：
数据库 时间：
2015-05-25 21:53:06
阅读次数：
108
