什么是yarn: “Yarn是由Facebook、Google、Exponent 和 Tilde 联合推出了一个新的 JS 包管理工具 ,Yarn 是为了弥补 npm 的一些缺陷而出现的。 yarn 的优点: 1.安装速度快(服务器速度快)； 2.版本锁定； 3.缓存机制； 通过npm 下载yarn ...
分类：
其他好文 时间：
2020-01-25 23:24:38
阅读次数：
72
nvm Node Version Management nvm list 查看所有已安装的 node 版本 nvm install 版本号 安装指定版本的 node nvm use 版本号 切换到指定版本号 nvm proxy 代理地址 配置代理进行下载 nrm（node registry mana ...
分类：
其他好文 时间：
2020-01-24 17:30:42
阅读次数：
89
spark动态资源调整其实也就是说的executor数目支持动态增减，动态增减是根据spark应用的实际负载情况来决定。 开启动态资源调整需要（on yarn情况下） 1.将spark.dynamicAllocation.enabled设置为true。意思就是启动动态资源功能 2.将spark.sh ...
分类：
其他好文 时间：
2020-01-22 18:07:12
阅读次数：
159
环境：CDH5.13.3 spark2.3 在提交任务之后，发现executor运行少量几台nodemanager，而其他nodemanager没有executor分配。 通过spark-shell模拟如下： 第一次尝试分配6个exeutor,具体如下 spark2-shell \ --driver ...
分类：
其他好文 时间：
2020-01-21 10:33:56
阅读次数：
120
1、前面创建了第一个项目，结构如下，使用TypeScript. 2、yarn start启动项目 3、点击GettingStarted是umi的官方网站 https://umijs.org/guide/getting-started.html 4、我们没必要从头建立项目，直接使用antdesign项 ...
分类：
其他好文 时间：
2020-01-20 14:56:55
阅读次数：
242
1 Cypress 介绍 赛普拉斯是为现代网络构建的下一代前端测试工具。我们解决了开发人员和质量检查工程师在测试现代应用程序时面临的主要痛点。 （1） cypress 的官网 www.cypress.io/ 如下如： （2）点击DOCS 进入API 如下图： 2 cypress 安装 系统要求： m ...
分类：
其他好文 时间：
2020-01-20 11:24:08
阅读次数：
1374
安装koa-session yarn add koa-session 配置koa-session redis const session = require('koa-session'); const Redis = require('ioredis'); const redis = new Red ...
分类：
Web程序 时间：
2020-01-17 13:25:47
阅读次数：
127
简介 Yet Another Resource Negotiator ,负责整个集群资源的调度，和管理，支持多框架资源统一调度（HIVE spark flink） 开启yarn 安装hadoop，可以看我之前的博文 这边就不讲了 编辑 etc/hadoop/mapred-site.xml: 添加如下 ...
分类：
其他好文 时间：
2020-01-17 13:08:54
阅读次数：
81
yarn is similar to npm. how to install yarn: npm install yarn -g or choco install yarn npm vs yarn: yarnnpm说明 yarn init npm init 初始化项目，生成package.json文 ...
分类：
其他好文 时间：
2020-01-16 21:55:47
阅读次数：
69
前提：我用的vue-cli配置的环境 H5添加接口代理和域名解析 接口代理 1.配置主机 2.设置端口 3.拦截请求 在项目根目录添加文件vue.config.js 代码： module.exports = { devServer: { // 设置主机地址 host: 'm.imooc.com', ...
分类：
其他好文 时间：
2020-01-15 20:00:45
阅读次数：
84
