Playbook简介 playbook是由一个或多个模块组成得,使用多个不同得模块, 完成一件事情 playbook通过yaml语法识别描述得状态文件,扩展名是yaml。 yaml 三板斧 缩进:yaml使用一个固定的缩进风格表示层级结构,每个缩进由两个空格组成,不能使用tabs(默认,因为一个ta ...
分类:
Web程序 时间:
2020-07-09 22:30:32
阅读次数:
97
nohup rsync -rp --rsh=ssh /data/test/bi_270000_original_images glodon@192.168.8.195:/data02/cv_data/ nohup: ignoring input and appending output to `no ...
分类:
其他好文 时间:
2020-07-09 01:17:20
阅读次数:
104
一、scp scp是secure copy的简写,用于在Linux下进行远程拷贝文件的命令,和它类似的命令有cp,不过cp只是在本机进行拷贝不能跨服务器,而且scp传输是加密的,它使用ssh安全协议传输数据。 scp系统开消小不占资源,不会提高多少系统负荷。虽然 rsync只传送修改的部分。 1.命 ...
分类:
系统相关 时间:
2020-07-08 15:04:41
阅读次数:
99
-R --relative 把全路径拷贝到目标,把上级目录的全路径拷贝 不管加不加/ 都会讲源数据路径一起同步 通过--daemon方式pull,似乎只能复制文件,不能复制目录,-R选项无效但是--daemon方式push,/是文件 不带/ 是目录 -R是全路径 rsyncd.conf motd f ...
分类:
其他好文 时间:
2020-07-08 09:12:42
阅读次数:
77
应用场景,每天定时执行数据同步的所有的存储过程;先写一个同步数据的总的存储过程,具体代码如下: create or replace procedure run_all_sync_proc is begin Sync_Bank_TPEB_BS_SGMT;--基础信息表TPEB_BS_SGMT sync ...
分类:
数据库 时间:
2020-07-06 20:27:58
阅读次数:
98
Kafka安装部署 Kafka依赖zookeeper,默认kafka有自带的zookeeper,但是一般情况使用自建的好一些 1、 安装zookeeper 1) 创建目录 mkdir /data/kafka/zookeeper/{log,data} -p 2) 下载zookeeper安装包 cd / ...
分类:
其他好文 时间:
2020-07-06 10:58:34
阅读次数:
97
目录 目录摘要scp拷贝scp定义scp基本语法案例rsync远程同步工具定义基本语法案例集群分发脚本参考文献toc 摘要 搭建集群时往往多台服务器具有相同的配置,为避免重复工作,希望通过脚本同步配置 scp拷贝 scp定义 scp可以实现服务器与服务器之间的数据拷贝。(from server1 t... ...
分类:
其他好文 时间:
2020-07-05 00:54:41
阅读次数:
89
整个集群完成 Leader 选举之后,Learner(Follower 和 Observer 的统称)回向 Leader 服务器进行注册。当 Learner 服务器想 Leader 服务器完成注册后,进入 数据同步环节。数据同步流程:(均以消息传递的方式进行)Learner 向 Learder 注册 ...
分类:
其他好文 时间:
2020-07-04 13:46:33
阅读次数:
75
Zookeeper集群完成Leader选举后,会进行Leader和Follower的数据同步(或叫状态同步),完成同步是保证服务器数据一致,可以提供服务的前提,接下来记录下Zookeeper数据同步相关的内容,主要参考文末书籍和博文。 数据同步分类 Zookeeper中数据同步一共有四类,如下。 D ...
分类:
其他好文 时间:
2020-07-03 00:40:01
阅读次数:
72
现阶段需要做数据库同步工作,目前调研了两个工具datax和kettle 这两者各有优缺点,基本的就不总结了。现在说说一些关键点: 基本方面: 1.datax适合做数据同步工作;kettle适合数据清洗,转换工作 目前成型的可视化界面,datax推荐datax web,kettle后期维护用的界面推荐 ...
分类:
其他好文 时间:
2020-07-01 12:14:39
阅读次数:
421