hadoop及NameNode和SecondaryNameNode工作机制 1.hadoop组成 Common MapReduce Yarn HDFS (1)HDFS namenode:存放目录,最重要的(主机) datanode:存放数据。(从机) 2namenode:“助手” (2)YARN R ...
分类:
其他好文 时间:
2019-11-21 12:21:17
阅读次数:
83
在创建项目之后执行 $ yarn eject 抽离配置文件 会多出config和script文件夹 接下来安装less yarn add less less-loader 或者 npm install less less-loader 安装完成后打开config文件夹,找到webpack.confi ...
分类:
其他好文 时间:
2019-11-19 14:15:10
阅读次数:
90
上一篇说到Spark的yarn client运行模式,它与yarn cluster模式的主要区别就是前者Driver是运行在客户端,后者Driver是运行在yarn集群中。yarn client模式一般用在交互式场景中,比如spark shell, spark sql等程序,但是该模式下运行在客户端 ...
分类:
其他好文 时间:
2019-11-18 22:14:29
阅读次数:
101
常见端口汇总:Hadoop: 50070:HDFS WEB UI端口 8020 : 高可用的HDFS RPC端口 9000 : 非高可用的HDFS RPC端口 8088 : Yarn 的WEB UI 接口 8485 : JournalNode 的RPC端口 8019 : ZKFC端口 19888:j ...
分类:
其他好文 时间:
2019-11-18 20:10:58
阅读次数:
79
自定义主题 命令行主题工具 1.安装主题工具 首先安装「主题生成工具」,可以全局安装或者安装在当前项目下,推荐安装在项目里,方便别人 clone 项目时能直接安装依赖并启动。 yarn add element-theme --dev 2.安装chalk主题 安装白垩主题,可以从 npm 安装或者从 ...
分类:
其他好文 时间:
2019-11-18 15:41:51
阅读次数:
107
初始化Centos7vi /etc/sysconfig/network-scripts/ifcfg-ens33DEVICE=ens33TYPE=EthernetONBOOT=yesNM_CONTROLLED=yesBOOTPROTO=staticIPADDR=192.168.3.131GATEWAY ...
分类:
其他好文 时间:
2019-11-18 12:52:33
阅读次数:
64
1. 安装 前端工程根目录下执行 yarn add d3 ,安装 d3 依赖包。安装的版本 "d3": "^5.7.0" 2. vue 文件中引入 d3 import * as d3 from 'd3' 例如一个基础的 d3.vue 文件内容,包含基本的 <template> <script> <s ...
分类:
其他好文 时间:
2019-11-17 10:45:18
阅读次数:
218
大数据从入门到入土 语言基础:java(Java se,javaweb) Linux 基础:Linux(shell,高并发架构,lucene,solr) 框架学习:Hadoop(Hadoop,HDFS,Mapreduce,yarn,hive,hbase,sqoop,zookeeper,flume) ...
分类:
其他好文 时间:
2019-11-16 21:47:53
阅读次数:
107
报错Cannot find module '@babel/plugin-transform-react-jsx' 1. 删除项目下node_modules文件夹 2. yarn add start (重新下载node_modules) 3. yarn start webpack.config.js配 ...
分类:
Web程序 时间:
2019-11-16 18:04:57
阅读次数:
182
在使用electron-builder 打包时的一些心得希望可以帮助更多的人解决问题 一、安装 electron-builde 在此之前必须先安装yarn 当然用npm也可以只是网络不太好 yarn add electron-builder --save-dev 二、配置package.json { ...
分类:
其他好文 时间:
2019-11-15 12:20:00
阅读次数:
94