1、概述 Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而MapReduce等运算程序则相当于运行于操作系统之上的应用程序。 Yarn的架构如下图所示： 从Yarn的架构图来看，他主要由ResourceManager、NodeManager、Appli ...
分类：
其他好文 时间：
2019-12-10 20:58:51
阅读次数：
97
TSLint是TypeScript代码的样式风格检查工具。类似于JavaScript的ESLint，或者Ruby的Rubocop。 配置TSLint TSLint是一个外部工具，我们需要进行一次安装工具的流程 #初始化package.json npm init yarn add ts-node ty ...
分类：
其他好文 时间：
2019-12-10 15:05:52
阅读次数：
255
本地模式Spark单机运行，一般用于开发测试。Standalone模式构建一个由Master+Slave构成的Spark集群，Spark运行在集群中。Spark on Yarn模式Spark客户端直接连接Yarn。不需要额外构建Spark集群。Spark on Mesos模式Spark客户端直接连接 ...
分类：
其他好文 时间：
2019-12-09 21:11:23
阅读次数：
237
https://tech.meituan.com/2019/08/01/hadoop-yarn-scheduling-performance-optimization-practice.html 文章对性能优化的思路，如果评测性能，找到性能瓶颈，优化，优化效果评估，上线部署给出了很好的教科书式的案例 ...
分类：
其他好文 时间：
2019-12-07 19:36:55
阅读次数：
107
从最简单的开始吧，先创建一个空文件夹，用vscode打开（其他方式也ok），在终端下运行yarn init 命令，完成就会出现package.json这个文件了。 接下来运行npm install webpack webpack-cli --save-dev命令，安装webpack和webpack- ...
分类：
Web程序 时间：
2019-12-07 16:21:04
阅读次数：
127
spark submit 参数及其调优https://blog.csdn.net/guohecang/article/details/52088117 Spark配置参数详解 一.yarn模式下一个示例:./bin/spark-submit \ --master yarn-cluster \ --n ...
分类：
其他好文 时间：
2019-12-06 16:25:50
阅读次数：
103
一、简言 React开发目前已经非常流行，对于如何实现对React项目的管理和维护，React生态圈出现了大量可用的开发工具，例如Browserify、Gulp、Grunt、webpack等。其中，webpack称为CommonJS模块的主流工具之一，它是一个模块绑定器，拥有模块化和网络性能的两大优 ...
分类：
其他好文 时间：
2019-12-05 13:36:38
阅读次数：
98
Yarn是与npm兼容的JavaScript软件包管理器，可帮助自动化安装，更新，配置和删除npm软件包的过程。 它的创建是为了解决npm的一系列问题，例如通过并行化操作并减少与网络连接有关的错误来加快软件包的安装过程。 本文展示如何从Yarn RPM软件包存储库在CentOS 7系统上安装Yarn ...
分类：
其他好文 时间：
2019-12-04 18:37:31
阅读次数：
142
1. JS 包安装工具的选择npm or yarn 刚开始进行环境搭建的时候，用的是npm包管理工具，但是运行命令 npm run dev，启动项目总是报错，百度说是webpack和webpack-dev-server版本不兼容问题 原因：这是新版webpack存在的BUG，卸载现有的新版本webp ...
分类：
Web程序 时间：
2019-12-03 19:55:34
阅读次数：
167
使用yarn 安装 webpack 1. yarn的使用： yarn add 安装 yarn global add 全局安装 yarn add 软件包名+@版本号 指定版本安装 yarn remove +xxx 移除 yarn init 初始化 yarn upgrade +xxx 升级 所以，yar ...
分类：
Web程序 时间：
2019-12-03 17:56:37
阅读次数：
161
