一、词频统计： 1.读文本文件生成RDD lines lines = sc.textFile('file:///home/hadoop/word.txt') 2.将一行一行的文本分割成单词 words flatmap() words=lines.flatMap(lambda line:line.sp ...
分类：
其他好文 时间：
2021-04-20 15:02:06
阅读次数：
0
Docker Hadoop 配置常见错误及解决办法 问题1：wordcount运行卡住，hadoop 任务运行到running job就卡住了 INFO mapreduce.Job: Running job: job_.... 解决如下： 1. 修改mapred-site.xml配置，配置文件在Ha ...
分类：
其他好文 时间：
2021-04-20 14:54:20
阅读次数：
0
umi-ui是在umi基础上扩展的umi-ui插件，主要是用于快速开发后台管理系统。 umi-ui启动顺序 1. node ./scripts/ui.js 2. **打包**3个ui插件： plugin-ui-blocks/plugin-ui-tasks/preset-ui 3. 运行ui界面 ui ...
分类：
其他好文 时间：
2021-04-20 14:02:58
阅读次数：
0
Redis基础 NoSQL 学名（not only sql） 特点： 存储结构与MySQL这一种关系型数据库完全不同，NoSQL存储的是key-value形式的数据。 NoSQL有很多产品，都有自己的api和语法，以及业务场景。 产品种类： Mongodb Redis Hbase hadoop No ...
分类：
其他好文 时间：
2021-04-19 14:35:28
阅读次数：
0
使用环境 项目环境：Idea 2020.2.3、 Maven 3.6.3 、springboot 2.1.4 本人在创建springboot项目时spring-boot-maven-plugin 及Idea右侧Plugins划红，导致项目启动打包有问题。虽然项目能跑，但是后续开发中可能会出现不可预知 ...
分类：
编程语言 时间：
2021-04-19 14:12:25
阅读次数：
0
一、前期的准备工作 1，JDK、MySQL、eclipse、tomcat、maven的下载安装 2、配置好maven的环境变量 3、配置maven的远程仓库地址 4、配置eclipse里面maven的Installations、user settings 二、项目准备 1、从GIT上download ...
分类：
其他好文 时间：
2021-04-16 12:25:05
阅读次数：
0
datagrip 连接elasticsearch 默认该driver加载项 1.去maven仓库下载https://mvnrepository.com/artifact/org.elasticsearch.plugin/x-pack-sql-jdbc 下载jar包 2. 把elasticsearch ...
分类：
其他好文 时间：
2021-04-16 11:41:50
阅读次数：
0
先搭建本地YUM源 确认系统版本 [root@moke ~]# cat /etc/redhat-release CentOS Linux release 7.2.1511 (Core) [root@moke ~]# 准备资源： http://mirror.nsc.liu.se/centos-stor ...
分类：
其他好文 时间：
2021-04-15 12:18:08
阅读次数：
0
实现Gitlab事件自动触发Jenkins构建及钉钉消息推送 实践环境 GitLab Community Edition 12.6.4 Jenkins 2.284 Post build task 1.9（Jenkins插件） Generic Webhook Trigger Plugin 1.72（J ...
分类：
其他好文 时间：
2021-04-14 12:21:46
阅读次数：
0
eclipse导入了jar查看不了源码解决方法 eclipse导入了jar查看不了源码解决方法 参考文章： （1）eclipse导入了jar查看不了源码解决方法 （2）https://www.cnblogs.com/jianshuai520/p/9267273.html 备忘一下。 转： eclip ...
分类：
编程语言 时间：
2021-04-09 13:15:53
阅读次数：
0
