码迷,mamicode.com
首页 >  
搜索关键字:hadoop shell 自动化部署    ( 42284个结果
Hadoop2的FN安装(federated namespace)
尝试了简单的安装hadoop2后,我们再来尝试一下hdfs的一项新功能:FN。这项技术可以解决namenode容量不足的问题。它采用多个namenode来共享datanode的方式,每个namenode属于不同的namespace。下面是我们的安装信息Hadoop 版本:2.2.0OS 版本: Ce...
分类:其他好文   时间:2014-05-17 10:54:41    阅读次数:518
shell中$0,$?,$!等的特殊用法
变量说明:$$Shell本身的PID(ProcessID)$!Shell最后运行的后台Process的PID$?最后运行的命令的结束代码(返回值)$-使用Set命令设定的Flag一览$*所有参数列表。如"$*"用「"」括起来的情况、以"$1 $2 … $n"的形式输出所有参数。$@所有参数列表。如"...
分类:其他好文   时间:2014-05-17 04:07:37    阅读次数:206
Hadoop2的HA安装(high availability):nfs+zookeeper
前面介绍过hadoop的简单安装和FA安装,在这里将介绍几种hadoop2中HA(高可用性)安装,HA技术使hadoop不再存在单点namenode的故障。先来第一种:nfs+zookeeperHadoop 版本:2.2.0OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配...
分类:其他好文   时间:2014-05-17 03:07:21    阅读次数:388
Hadoop2的HA安装(high availability):JournalNode+ zookeeper
前面介绍过使用NFS+zookeeper来解决namenode单点失败问题,因为NFS可能也会存在单点问题,所以hadoop提供了一种叫做JournalNode技术,这项技术可以在JournalNode节点间共享数据我们来介绍这一种技术:JournalNode+ zookeeperHadoop 版本...
分类:其他好文   时间:2014-05-17 00:29:07    阅读次数:331
Linux Bash内置命令大全详细介绍
转自:http://os.51cto.com/art/201006/207329.htm主要Shell内置命令Shell有很多内置在其源代码中的命令。这些命令是内置的,所以Shell不必到磁盘上搜索它们,执行速度因此加快。不同的Shell内置命令有所不同。A.2.1 bash内置命令.:执行当前进程...
分类:系统相关   时间:2014-05-17 00:24:55    阅读次数:349
Vim使用心得——整体设置
经过一段时间使用Vim和Shell,积累了不少小的心得体会。使用起来可以大大增加编辑效率,在此记录。##1. 编译最新版Vim官网上提供的Vim是非常基础的版本,最新的补丁都没有添加进去。在安装了[官方版本](http://www.vim.org/)后,还需要自己编译一下Gvim.exe和Vim.e...
分类:其他好文   时间:2014-05-16 23:22:21    阅读次数:481
shell中常用I/O重定向命令格式说明
命令1> 文件1将命令1的输出结果重定向到文件1命令1&>文件1将命令1的输出结果和标准错误输出一起重定向到文件1命令1>>文件1将命令1的输出结果追加到文件1中命令12>文件1将命令1的标准错误输出的结果重定向到文件1中命令1< 文件1将文件1作为命令1的标准输入命令1 << 字符串1允许连续输....
分类:其他好文   时间:2014-05-16 22:52:36    阅读次数:247
Hadoop参考学习
参考文章
分类:其他好文   时间:2014-05-16 22:42:24    阅读次数:240
Hadoop2的简单安装
---恢复内容开始---前面花了很多时间来介绍hadoop1的安装,随着hadoop的发展,hadoop2的应用也越来越普及,hadoop2解决了hadoop1中的很多问题,比如单点故障,namenode容量小的问题。我们先来安装最简单的版本Hadoop 版本:2.2.0OS 版本: Centos6...
分类:其他好文   时间:2014-05-13 16:45:30    阅读次数:333
linux常用的技巧
在linux下使用shell时,我们常遇到这样的情况,即:前面所输入的所有命令需要重新做一遍,这时候在一条一条输就会觉得很麻烦,而且以后很可能这些命令还得重新执行一遍。这时,如果把shell下的history中的命令提取出来就好了,放到一个shell脚本中,就可以方便我们以后使用了。..
分类:系统相关   时间:2014-05-13 13:05:02    阅读次数:328
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!