调用rest api杀死yarn上的应用 调用yarn reat api,通过app name 获取application id public static String getApplicationID(String appName){ String getAppsURL = "http://rm ...
vuex 核心是 store，包含着应用中的大部分状态 Mutations 存放的是改变 state 的方法，更改store的状态的唯一方法是提交 mutation Actions 存放的是一些业务逻辑，通常是异步任务。 安装 yarn add vuex 使用 import Vue from ‘vu ...
分类：
其他好文 时间：
2019-12-12 16:48:34
阅读次数：
100
2019-12-11 Spark的框架体系 三个核心组件：SparkCore SparkSQL SparkStreaming Spark有三种部署模式：Stanalone Yarn Messos Spark和MapReduce之间区别 ***** 1.Spark把运算中数据放到内存中，迭代计算效率会 ...
分类：
其他好文 时间：
2019-12-11 21:33:03
阅读次数：
153
1、概述 Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而MapReduce等运算程序则相当于运行于操作系统之上的应用程序。 Yarn的架构如下图所示： 从Yarn的架构图来看，他主要由ResourceManager、NodeManager、Appli ...
分类：
其他好文 时间：
2019-12-10 20:58:51
阅读次数：
97
TSLint是TypeScript代码的样式风格检查工具。类似于JavaScript的ESLint，或者Ruby的Rubocop。 配置TSLint TSLint是一个外部工具，我们需要进行一次安装工具的流程 #初始化package.json npm init yarn add ts-node ty ...
分类：
其他好文 时间：
2019-12-10 15:05:52
阅读次数：
255
本地模式Spark单机运行，一般用于开发测试。Standalone模式构建一个由Master+Slave构成的Spark集群，Spark运行在集群中。Spark on Yarn模式Spark客户端直接连接Yarn。不需要额外构建Spark集群。Spark on Mesos模式Spark客户端直接连接 ...
分类：
其他好文 时间：
2019-12-09 21:11:23
阅读次数：
237
https://tech.meituan.com/2019/08/01/hadoop-yarn-scheduling-performance-optimization-practice.html 文章对性能优化的思路，如果评测性能，找到性能瓶颈，优化，优化效果评估，上线部署给出了很好的教科书式的案例 ...
分类：
其他好文 时间：
2019-12-07 19:36:55
阅读次数：
107
从最简单的开始吧，先创建一个空文件夹，用vscode打开（其他方式也ok），在终端下运行yarn init 命令，完成就会出现package.json这个文件了。 接下来运行npm install webpack webpack-cli --save-dev命令，安装webpack和webpack- ...
分类：
Web程序 时间：
2019-12-07 16:21:04
阅读次数：
127
spark submit 参数及其调优https://blog.csdn.net/guohecang/article/details/52088117 Spark配置参数详解 一.yarn模式下一个示例:./bin/spark-submit \ --master yarn-cluster \ --n ...
分类：
其他好文 时间：
2019-12-06 16:25:50
阅读次数：
103
一、简言 React开发目前已经非常流行，对于如何实现对React项目的管理和维护，React生态圈出现了大量可用的开发工具，例如Browserify、Gulp、Grunt、webpack等。其中，webpack称为CommonJS模块的主流工具之一，它是一个模块绑定器，拥有模块化和网络性能的两大优 ...
分类：
其他好文 时间：
2019-12-05 13:36:38
阅读次数：
98
