码迷,mamicode.com
首页 >  
搜索关键字:hadoop shell 自动化部署    ( 42284个结果
linux 判断指定用户对指定目录具有的权限
脚本名:power.sh脚本内容:Shell代码 #!/bin/sh username3=$1 dir_name2=$2 # get existing directory file_path=$dir_name2 while true do if [ -d $fil...
分类:系统相关   时间:2014-05-18 18:49:24    阅读次数:319
让你提前认识软件开发(22):shell脚本中的文件操作
第1部分 重新认识C语言shell脚本中的文件操作 【文章摘要】        编写shell脚本时,经常会涉及到对文件的操作,比如从文件中读取一行数据、向文件追加一行数据等。完成文件读写操作的方法有很多,了解各种命令下文件操作的执行情况,有助于开发人员在不同使用场景下选择合适的命令。       本文以实际的shell脚本为例,介绍了对文件进行操作的不同方法,为相关开发工作提供了参考。【关键词】...
分类:其他好文   时间:2014-05-18 15:52:35    阅读次数:388
hadoop学习;Streaming,aggregate;combiner
hadoop streaming允许我们使用任何可执行脚本来处理按行组织的数据流,数据取自UNIX的标准输入STDIN,并输出到STDOUT 通过设定mapper为‘RandomSample.py 10’,我们按十分之一的采样率,没有设定特殊的reducer,一般默认使用IdentityReducer(把输入直接转向输出) 通过HDFS的命令getMerge(输出合并)或其他文件操作,可以获得...
分类:其他好文   时间:2014-05-18 15:12:21    阅读次数:380
javascript打开本地应用
function openShell(){ if(window.ActiveXObject){ var cmd = new ActiveXObject('WScript.Shell') cmd.Run("D://XmanagerEnterprise4//Xftp.exe") } else{      alert("浏览器不支持自动上传!")      }   }...
分类:编程语言   时间:2014-05-18 09:57:59    阅读次数:285
linux-shell脚本命令之sed
[ sed简介: ] sed是一个很好的文件处理工具, 它本身是一个管道命令, 以行为单位进行处理, 可以用于对数据行进行新增、选取、替换、删除等操作。 sed命令行格式:sed [-nefri] 'range command' file [ sed工作流程: ] 使用vim这种屏幕编辑器编辑一个文件的时候, 我们需要把这个文件打开, 这里存在两个问题: 1. 打开一个比较大的文件会消耗很多内存。 2. 我们无法写脚本调用vim来编辑文件, 但是sed可以通过写脚本编辑文件。...
分类:系统相关   时间:2014-05-18 06:53:12    阅读次数:551
Hadoop-2.2.0中文文档—— Common - Native Libraries Guide
概览 这个入门教程描述了native(本地?原生?)hadoop库,包含了一小部分关于native hadoop共享库的讨论。 This guide describes the native hadoop library and includes a small discussion about native shared libraries. 注意: 根据你的环境,词组 "native l...
分类:其他好文   时间:2014-05-18 03:21:01    阅读次数:458
Linux常用Shell脚本
我们在运维中,尤其是linux运维,都知道脚本的重要性,脚本会让我们的 运维事半功倍,所以学会写脚本是我们每个linux运维必须学会的一门功课,这里收藏linux运维常用的脚本。如何学好脚本,最关键的是就是大量的练习 和实践。根据以下脚本我们可以拓展,这样我们提高的很快!举一反三! 1.用Shell...
分类:系统相关   时间:2014-05-18 02:07:12    阅读次数:403
shell timeout
写脚本的时候,经常需要用到超时控制。看《shell专家编程》时看到一个好例:修改了一下,1.超过timeout时间还没执行完,则kill进程,发邮件告警:set-xmailSend(){ mailContent="xxxx Web response time over 5 seconds" echo...
分类:其他好文   时间:2014-05-17 23:30:14    阅读次数:497
linux-mint下搭建android,angularjs,rails,html5开发环境
目录[-]必备软件:环境配置:【open-jdk-6.0】 【android-sdk】 【ant】 【github】【node.js】 【rvm】(ruby-1.9.3 rails-4.0.0 gemfile) 必备概念:关于自动化部署我推荐大家参谋一下Fortune Zhang的一篇文章:andr...
分类:移动开发   时间:2014-05-17 23:17:03    阅读次数:647
Maven构建Hadoop开发环境
Maven构建Hadoop开发环境
分类:其他好文   时间:2014-05-17 22:48:13    阅读次数:258
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!