hadoop 批量处理脚本编写

标签：批量处理   syn   shel   rm -rf   com   ima   速度   xca   nbsp   

编写shell脚本就是解决批量处理

1. 在/usr/local/bin 创建脚本 并授权所有用户 chmod a+x  xcall.sh

  xcall.sh

比如：删除/tmp/*所有文件   批量删除4台服务器的/tmp/*所有文件

　　xcall.sh rm -rf /tmp/*

2 rsync 远程同步 速度快

四个机器均安装rsync命令。 s129 s128 s127 s126
远程同步.
$>sudo yum install rsync 或 yum install rsync 

rsync -lr 赋值链接（包括符号链接）

远程同步,支持符号链接。
rsync -lr xxx xxx

权限配置

ssh权限问题
----------------
1.~/.ssh/authorized_keys
　　644
2.$/.ssh
　　700
3.root

hadoop 批量处理脚本编写

标签：批量处理   syn   shel   rm -rf   com   ima   速度   xca   nbsp   

原文地址：https://www.cnblogs.com/YuanWeiBlogger/p/11494476.html