AppMaster向RM请求资源MRAppMaster :serviceinit // service to allocate containers from RM (if non-uber) or to fake it (uber) containerAllocator = creat...
分类:
其他好文 时间:
2014-09-11 15:12:42
阅读次数:
867
1.Linux的版本:核心(kernel)版本和发行(distribution)版本2.复制、删除和移动文件的命令cp [选项] 源文件或目录 目标文件或目录 -R,-r递归复制目录,即将源目录下的所有文件及各级子目录都复制到目标位置。 rm[选项] 文件列表 删除文件和目录mv [选项] sour...
分类:
数据库 时间:
2014-09-10 17:20:10
阅读次数:
341
安装好git客户端和搭好服务器之后,第一步要做的是 git clone 远程主机 添加本地项目时,在git目录下 git add . //表示把当前文件添加到版本库中 git rm -rf 版本库名 //可以删除本地仓库 查看git记录用 git log git...
分类:
其他好文 时间:
2014-09-10 15:40:30
阅读次数:
177
选项名称使用格式含义-ls-ls 查看指定路径的当前目录结构-lsr-lsr 递归查看指定路径的目录结构-du-du 统计目录下个文件大小-dus-dus 汇总统计目录下文件(夹)大小-count-count [-q] 统计文件(夹)数量-mv-mv 移动-cp-cp 复制-rm-rm [-sk.....
分类:
其他好文 时间:
2014-09-10 12:07:20
阅读次数:
133
首先名词解释。ORM:对象关系映射(英语:Object Relational Mapping,简称ORM,或O/RM,或O/R mapping),是一种程序技术,用于实现面向对象编程语言里不同类型系统的数据之间的转换。从效果上说,它其实是创建了一个可在编程语言里使用的“虚拟对象数据库”。面向对象是从...
Client 端:
//最终通过ApplicationClientProtocol协议提交到RM端的ClientRMService内
package org.apache.hadoop.mapred;
jobclient包内
YarnRunner
public JobStatus submitJob(JobID jobId, String jobSubmitDir, Credentials...
分类:
其他好文 时间:
2014-09-09 12:48:58
阅读次数:
245
NM端
//NM发送心跳,增加一个NODE_UPDATE事件,简单返回一个respone,异步驱动型,事件再驱动assignContainers,从资源请求结构里取出需求分配资源
//AsyncDispatcher原理
//一个event队列,一个eventtype.class 到处理器对应关系(仅仅是一个class对应一个处理器,class是个Enum可能会有很多种值,具体逻辑在处理器内部)...
分类:
其他好文 时间:
2014-09-09 12:31:58
阅读次数:
307
AppMaster向RM请求资源
//APPMASTER向RM发送心跳,更新资源请求结构,从分配好的内存结构取出分配的资源,具体任务分配是后台异步的由NM发送心跳驱动
MRAppMaster
:serviceinit
// service to allocate containers from RM (if non-uber) or to fake it (uber)
conta...
分类:
其他好文 时间:
2014-09-09 12:31:48
阅读次数:
244
今天新建了一个项目传到git上,但是每次编译都会有一些无用的文件生成,于是就编写了ignore.但是发现无用。因为你的文件已经上传到服务器了,再编写ignore就无用了,ignore的适用是文件没上传服务器之前,可以被忽略,遇到这种情况怎么解决呢? 适用git的命令 $ git rm --c...
分类:
其他好文 时间:
2014-09-09 11:44:48
阅读次数:
197
1、作用: 删除一个目录中的一个或多个文件或目录;2、格式: rm [选项] 文件或目录3、常见参数: 4、使用实例: [root@www hello]# rm –r -i ./why5、使用说明: (1)如果没有使用- r 选项,则 rm 不会删除目录; (2)使用该命令时一旦文件被...
分类:
系统相关 时间:
2014-09-05 15:40:31
阅读次数:
191