背景： 1）需要将yarn queue user的资源使用展示出来 2）数据已经存储在mysql里，需要过滤后插入到influxdb 3）由于历史数据比较多，用户的CPU、内存的数据分别有200万 分析： 1）查询mysql中m_bizhadoop_yarn_queue_userinfo的表中查询出 ...
分类：
数据库 时间：
2020-04-05 20:45:21
阅读次数：
387
1、什么VuePress 一个 VuePress 网站是一个由 Vue、Vue Router 和 webpack 驱动的单页应用 2、快速上手VuePress // 安装yarn： https://classic.yarnpkg.com/zh-Hans/docs/install#windows-st ...
分类：
其他好文 时间：
2020-04-05 09:25:11
阅读次数：
147
Pipenv is a tool that aims to bring the best of all packaging worlds (bundler, composer, npm, cargo, yarn, etc.) to the Python world. Windows is a fir ...
分类：
编程语言 时间：
2020-04-04 14:50:59
阅读次数：
91
【NPM】Building fresh packages运行很久都没反应原创onemetre 最后发布于2019-12-24 10:20:13 阅读数 287 收藏展开【问题】通过YARN 安装，Building fresh packages运行很久都没反应 直至NODE-SASS报错 【分析】百度 ...
分类：
其他好文 时间：
2020-04-04 11:44:37
阅读次数：
448
背景 1）试试本地模式的spark streaming 2）试试yarn模式的spark streaming 1、本地模式的spark streaming 代码如下： package com.hxh import org.apache.spark.SparkConf import org.apach ...
分类：
其他好文 时间：
2020-04-03 19:55:21
阅读次数：
63
最近在公司运维同学的推动下，前后端部署使用docker镜像方式实施。前端在实施的时候遇到了问题：如何在一次jenkin任务构建使用两个gitlab仓库的东西(我们前端的代码和配置存在于两个不同的gitlab仓库)，我们需要在构建docker镜像的时候，将构建代码和配置全部放到镜像中去，镜像启动的的时 ...
分类：
其他好文 时间：
2020-04-02 14:25:55
阅读次数：
454
零. 相关文件 链接：https://pan.baidu.com/s/1KmfZlxevk07p _Aosnsm2w 提取码：df5l 一. MapReduce环境配置 1. 解压hadoop 把hadoop的安装包解压到Windows下(这里的安装包就是你搭hadoop集群时的安装包,我的是 ) ...
服务功能 ResouceManager： 1、处理客户端的请求 2、启动和监控ApplicationMaster 3、监控nodemanager 4、资源的分配和调度 Nodemanager 1、处理单个节点的资源管理 2、处理来自ResouceManager的命令 3、处理来自Applicatio ...
分类：
其他好文 时间：
2020-03-31 21:23:55
阅读次数：
67
文档：https://cli.vuejs.org/zh/guide/ 条件： npm 更至最新 node >=8.9 1.全局安装 npm install -g @vue/cli 或 yarn global add @vue/cli 2.查看版本/是否安装成功 vue -V image.png 3. ...
分类：
其他好文 时间：
2020-03-29 19:55:28
阅读次数：
103
如果两个reduce分别在两台机器上运行,,各自产生的日志,都保存在各自的机器上， 所以要看完整地日志必须开启日志聚合功能yarn-site.xml更改设置 ...
分类：
其他好文 时间：
2020-03-28 18:06:28
阅读次数：
96
