一：MapReduce框架 （结合YARN框架） 补充：MapReduce框架知道我们写的map-reduce程序的运行逻辑。我们写的map-reduce中并没有管理层的任务运行分配逻辑，该逻辑被封装在MapReduce框架里面，被封装为MRAppMaster类，该类用于管理整个map-reduce ...
分类：
其他好文 时间：
2020-02-24 18:50:55
阅读次数：
71
Braft Editor 是基于draft js开发的富文本编辑器，适用于 React 框架。 1. 安装 使用npm 使用yarn 2. 基本使用 2. 自定义内置控件 Braft Editor使用 controls 属性指定需要展示的控件；使用contentStyle调整编辑区域的高度。 3. ...
分类：
Web程序 时间：
2020-02-24 15:24:36
阅读次数：
344
Yarn 对你的代码来说是一个包管理器， 你可以通过它使用全世界开发者的代码， 或者分享自己的代码。Yarn 做这些快捷、安全、可靠，所以你不用担心什么。通过Yarn你可以使用其他开发者针对不同问题的解决方案，使自己的开发过程更简单。 使用过程中遇到问题，你可以将其上报或者贡献解决方案。一旦问题被修 ...
分类：
系统相关 时间：
2020-02-23 16:43:55
阅读次数：
91
一、环境依赖版本 1、npm安装yarn npm install -g yarn 查看版本： yarn --version 二、脚手架搭建以及在项目中引用antd插件 ...
分类：
其他好文 时间：
2020-02-23 09:35:46
阅读次数：
39
转自：https://www.jianshu.com/p/f510a1f8e5f0 1，yarn top 类似linux里的top命令，查看正在运行的程序资源使用情况 2， yarn queue -status root.users.xxxx 查看指定queue使用情况 3,yarn applica ...
分类：
其他好文 时间：
2020-02-22 15:31:35
阅读次数：
234
Spark 集群模式 系统当前支持几种集群管理器： Standalone – 包含在spark中的一个简单集群管理器，它使得设置一个集群很容易。 Apache Mesos – 一个通用集群管理器，也能运行Hadoop MapReduce 和 service 应用。 Hadoop YARN – the ...
分类：
其他好文 时间：
2020-02-22 14:09:44
阅读次数：
86
当前Spark最新版本为Spark 2.4.5。Spark 使用Hadoop’s client libraries 存取HDFS and YARN。下载是流行hadoop版的便宜预包装。用户也可以下载免hadoop的二进制包，通过参数Spark’s classpath 运行spark 用于任何Had ...
分类：
其他好文 时间：
2020-02-22 13:56:26
阅读次数：
182
这种问题当然离不了官网妈妈的支持：传送门 官网给了三种解决方案。前两种我就不赘述了（主要是因为我没用） 而官网的第三种推荐的方式： 1、安装依赖： $ npm install http-proxy-middleware --save $ # or $ yarn add http-proxy-midd ...
分类：
其他好文 时间：
2020-02-22 09:21:35
阅读次数：
284
#!/bin/bash #hadoop export HADOOP_HOME=/opt/cloudera/parcels/CDH-5.14.0-1.cdh5.14.0.p0.24 export PATH=${HADOOP_HOME}/bin:${HADOOP_HOME}/sbin:$PATH rea ...
分类：
其他好文 时间：
2020-02-22 00:34:00
阅读次数：
95
学习一个新框架方法： 推荐：官网+源码 跪在坚持 hadoop.apache.org spark.apache.org flink.apache.org storm.apache.org Hadoop:由HDFS/YARN/Map Reduce构成 HDFS 一个NameNode 和多个DATa N ...
分类：
其他好文 时间：
2020-02-21 18:19:23
阅读次数：
55
