架构 Driver Program：每个 Spark 应用的主程序 Spark Context：在 Driver 里面构建，用于协调、调度在各个节点运行的进程 Cluster Manager：管理节点，分配资源（可以是 Spark standalone、Mesos、Yarn、K8S） Worker ...
分类：
其他好文 时间：
2020-05-22 09:37:29
阅读次数：
62
一、安装 npm install -g @vue/cli # OR yarn global add @vue/cli 查看安装是否成功以及版本：vue -V 二、创建项目 vue create my-project 运行之后，会要求你选择哪种预设模式，第一个是使用默认配置，包含babel转换，esl ...
分类：
其他好文 时间：
2020-05-21 16:24:39
阅读次数：
581
axios作用：Axios 是一个基于 promise 的 HTTP 库，可以用在浏览器和 node.js 中。 首先。安装及配置 使用npm安装 npm install axios 使用 yarn 安装 yarn add axios 然后在入口文件 main.js中引入 import axios ...
分类：
移动开发 时间：
2020-05-19 20:09:29
阅读次数：
102
承接上一篇文档《Spark案例练习-打包提交》 将spark应用运行在yarn集群上 官网地址：http://spark.apache.org/docs/2.0.2/running-on-yarn.html 1. 在spark-env.sh中配置HADOOP_CONF_DIR 或者 YARN_CON ...
分类：
其他好文 时间：
2020-05-19 01:07:50
阅读次数：
53
1. 4种运行模式概述图 1）本地(local)模式，用于开发测试 2）Standalone是Spark自带的，如果一个集群是Standalone的话，那么就需要在多台机器上同时部署spark环境，只要修改一台机器配置，就要同步到所有的机器上去，比较麻烦，生产环境中不采取。 3） Yarn生成环境下 ...
分类：
其他好文 时间：
2020-05-18 18:12:35
阅读次数：
67
yarn设置临时镜像 yarn设置永久镜像 npm设置临时镜像 npm设置永久镜像 配置文件错误 lastUpdateCheck 1584361306390删掉就行了 ...
分类：
其他好文 时间：
2020-05-18 09:28:36
阅读次数：
123
安装vscode下载vscode https://code.visualstudio.com/ 安装vscode依赖yum install libXScrnSaver -y 安装vscodecd ~wget https://vscode.cdn.azure.cn/stable/ff915844119 ...
分类：
移动开发 时间：
2020-05-17 23:10:56
阅读次数：
125
今天在用yarn安装vue-cli时出现了错误../vue-hackernews-2.0> yarnyarn install v1.12.3[1/5] Validating package.json...[2/5] Resolving packages...[3/5] Fetching packag ...
分类：
其他好文 时间：
2020-05-16 16:23:35
阅读次数：
452
Standalone Cluster 就是独立的 Flink 集群，相对应的有基于 YARN 的 Flink 集群 要求 1. Java 1.8 和 JAVA_HOME 环境变量 2. 不同机器之间支持 SSH 免密码登陆 3. 不同机器都有相同的 Flink 目录结构 下载 Flink 包 （ " ...
分类：
其他好文 时间：
2020-05-16 00:27:14
阅读次数：
65
yarn修改为淘宝源 和npm修改淘宝源的的步骤差不多 1. 查看当前源 2. 临时修yran源 3. 修改yarn源为taobao源 4. 修改yarn源为官方源 `yarn config set registry https://registry.yarnpkg.com` ...
分类：
其他好文 时间：
2020-05-14 20:59:33
阅读次数：
167
