服务功能 ResouceManager： 1、处理客户端的请求 2、启动和监控ApplicationMaster 3、监控nodemanager 4、资源的分配和调度 Nodemanager 1、处理单个节点的资源管理 2、处理来自ResouceManager的命令 3、处理来自Applicatio ...
分类：
其他好文 时间：
2020-03-31 21:23:55
阅读次数：
67
List<String> list = new ArrayList<>();使用ArrayList对数据进行赋值，会出现不同线程争抢同一资源造成写入失败问题，会抛出异常“ConcurrentModificationException” List<String> list = new Vector<> ...
分类：
编程语言 时间：
2020-03-30 23:33:57
阅读次数：
97
简介: 并发队列Queue，队列其实就是一个容器 1.同步容器 Vector容器，HashTable容器，都是线程安全 如果同步容器使用foreach迭代过程中修改了元素的值，则会出现ConcurrentModificationException异常 可以使用iterator迭代器解决，但是在多线程 ...
分类：
其他好文 时间：
2020-03-23 18:31:25
阅读次数：
67
java.util.ConcurrentModificationException 问题处理 在对Map集合进行处理时，有时需要对Map集合中的键值对进行过滤删除处理。 例如：对key值进行判断，不满足需求（key值不为“key1”）的需要进行过滤。 1、执行报错的代码如下： public clas ...
分类：
编程语言 时间：
2020-03-17 08:06:24
阅读次数：
73
Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于分布式的操作系统平台。 Yarn基本架构 Yarn主要由ResourceManager、NodeManager、ApplicationMaster和Container等组件构成。 ResourceManager的作用： 处理客户端请 ...
分类：
其他好文 时间：
2020-03-13 20:25:14
阅读次数：
53
一.以之前搭建的为云计算平台为主节点 角色分配 Master:NameNode/DataNode ResourceManager/NodeManager Slave1:DataNode NodeManager Slave2:DataNode NodeManager 1. 修改hostname 2. ...
分类：
其他好文 时间：
2020-03-03 13:20:26
阅读次数：
95
java.util.ConcurrentModificationException 如果删空了，会报上面这个异常 输出结果如下：remove前集合数据：a，a，b，a，a， remove后集合数据：a，b，a， 为什么会出现这种情况？原因是集合的大小是动态变化的，在删除第1个值为“a”的元素后，集合 ...
分类：
编程语言 时间：
2020-02-15 09:26:12
阅读次数：
81
public class 链表{ public static void main(String[] args){ NodeManager nm = new NodeManager(); System.out.println(" add "); nm.add(5); nm.add(4); nm.add ...
分类：
其他好文 时间：
2020-02-09 14:31:26
阅读次数：
49
概要 JDK中提供ArrayList集合方便我们对集合内元素进行增删改查，但是ArrayList为了能够在单线程中快速进行操作其设计并不支持多线程进行操作。ArrayList在多线程环境下可能会产生java.util.ConcurrentModificationException异常。而对于我们需要 ...
分类：
编程语言 时间：
2020-01-24 09:17:58
阅读次数：
81
环境：CDH5.13.3 spark2.3 在提交任务之后，发现executor运行少量几台nodemanager，而其他nodemanager没有executor分配。 通过spark-shell模拟如下： 第一次尝试分配6个exeutor,具体如下 spark2-shell \ --driver ...
分类：
其他好文 时间：
2020-01-21 10:33:56
阅读次数：
120
