转自：https://blog.csdn.net/zhanglong_4444/article/details/99471770 name description value hadoop.registry.rm.enabled 是否在YARN资源管理器中启用了注册表？ 如果属实，那么YARN RM ...
迭代器（Iterator 迭代器Iterator接口同Collection、Map，也是Java集合框架的成员，不同于两者的是其本身并非用来盛装其他对象，而是用来遍历访问Collection集合中的元素。（Map接口并没有实现Iterator） Iterator主要有以下方法： boolean ha ...
分类：
其他好文 时间：
2020-07-04 20:52:50
阅读次数：
52
启动集群及监控 进入目录 cd /usr/local/hadoop-2.6.5/sbin/ 启动整个集群组件 ./start-dfs.sh 启动yarn集群 ./start-yarn.sh 启动日志服务 ./mr-jobhistory-daemon.sh start historyserver 查看 ...
分类：
其他好文 时间：
2020-07-04 16:57:27
阅读次数：
64
（1）MR程序提交到客户端所在的节点。（2）YarnRunner向ResourceManager申请一个Application。（3）RM将该应用程序的资源路径返回给YarnRunner。（4）该程序将运行所需资源提交到HDFS上。（5）程序资源提交完毕后，申请运行mrAppMaster。（6）RM ...
分类：
其他好文 时间：
2020-07-04 15:14:37
阅读次数：
54
工作流程1 Map Task MR工作流程2 Reduce Task 1）提交切片信息，jar包，和xml配置文件到yarn。2）Yarn ResourceManager启动一个MR AppMaster。3）AppMaster根据切片信息启动相应数量的Map Task。4）Map Task取读取按照 ...
分类：
其他好文 时间：
2020-07-03 23:29:37
阅读次数：
60
Installation Problem: [TypeError [ERR_INVALID_ARG_TYPE]: The "path" argument must be of type string. Receiv ed type boolean] #7985 yarn 运行问题 TypeError ...
分类：
其他好文 时间：
2020-07-03 01:07:37
阅读次数：
86
1.Node环境安装（版本至少超过6） 查看node版本: node -V 2.包管理工具（npm/cnpm/yarn) 1）查看版本: npm -v (版本至少超过3） cnpm -v yarn -v 2）查看镜像源： npm config get registry > https://regis ...
分类：
其他好文 时间：
2020-07-02 16:10:41
阅读次数：
60
crmsh又称crm，是用于配置和管理的Pacemaker命令行界面 官网：http://crmsh.github.io 配置yum源 在/etc/yum.repos.d目录下vim新建Stable.repo，写入以下内容： [network_ha-clustering_Stable] name=S ...
分类：
其他好文 时间：
2020-07-01 17:25:09
阅读次数：
102
可用性组支持的复制环境适用于一组离散用户数据库，称为“可用性数据库” 。 可以创建可用性组以实现高可用性 (HA) 或读取缩放。 HA 可用性组是一组共同实现故障转移的数据库。 读取缩放可用性组是一组复制到其他 SQL Server 实例以实现只读工作负荷的数据库。 一个可用性组支持一组主数据库以及 ...
分类：
其他好文 时间：
2020-07-01 17:22:28
阅读次数：
57
Hadoop的广义与狭义之分 狭义的Hadoop:指的是一个框架，Hadoop是由三部分组成：HDFS:分布式文件系统--》存储；MapReduce:分布式离线计算框架--》计算；Yarn:资源调度框架 广义的Hadoop:广义的Hadoop不仅仅包含Hadoop框架，除了Hadoop框架之外的一些 ...
分类：
其他好文 时间：
2020-06-30 22:14:42
阅读次数：
67
