hdfs dfsadmin -report hadoop fsck -locations ...
分类：
其他好文 时间：
2021-05-24 01:37:15
阅读次数：
0
? 今天，大家就请跟着数栈君一起，和申杭聊聊他从青铜到星耀的大数据之路。 数栈君：申杭，你是07年从华中科技大学软件工程专业毕业的，能说说你当时为什么选择这个专业吗？ 申杭：当时会计、师范、机械制造、土木类专业比较热门，一般家人都会让报这些专业，出来好就业。而电子、计算机、软件工程类的专业刚刚兴起， ...
分类：
其他好文 时间：
2021-05-24 00:46:57
阅读次数：
0
解决RuntimeError: you must first build vocabulary before training the model错误 查找解决方案，意思就是说你的数据集中的数量过少，解决方案有两种，扩大数据集的数量、另一个就是更改min_count的值例如：如果太少的话可以更改为 ...
分类：
其他好文 时间：
2021-05-23 23:49:16
阅读次数：
0
DolphinScheduler之最美好的遇见 主人翁介绍 hello，大家好，我是郭强，目前是Apache DolphinScheduler的Commiter。擅长大数据olap、大数据调度、RPC开发等。目前专注于大数据领域核心技术研发。 我也是一名开源爱好者，我要讲的是我从起始给 Dolphi ...
分类：
其他好文 时间：
2021-05-04 16:34:22
阅读次数：
0
今日分享开始啦，请大家多多指教~ 今天分享这种常识型的东西，觉得自己太菜了，所以决定还是回到Java基础学习里，花几天时间快速过一遍，我想应该有很多是我遗漏的点，毕竟学习的目标是大数据开发，基础不牢，地动山摇！ 01 概述 计算机包括硬件和软件两部分。硬件包括计算机中可以看得见的物理部分。而软件提供 ...
分类：
编程语言 时间：
2021-05-04 16:11:36
阅读次数：
0
这里介绍两个常用的管理hadoop集群的脚本 hadoop集群启停脚本myhadoop.sh #!/bin/bash if [ $# -lt 1 ] then echo "No Args Input..." exit ; fi case $1 in "start") echo " 启动 hadoop ...
分类：
其他好文 时间：
2021-05-04 15:28:54
阅读次数：
0
Arrays类 冒泡排序 一种排序的方式，对要进行排序的数组中两两相邻的数据进行两两比较，将较大数据放在后面，依次对所有的数据进行操作，直至所有数据按要求完成排序 n个数据进行排序，总共需要比较n-1次 每一次比较完毕，下一次比较会少一个数据参与 package com.Lei.array; pub ...
分类：
其他好文 时间：
2021-05-03 12:17:49
阅读次数：
0
###1.了解数据 01.数据量是多少？ -总的数据个数，存储空间的大小 -分的数据个数，存储空间的大小 分： 数据类型有哪些？ -- 文件夹 文件 时间周期 -- 02.了解数据分布 最大的数据多少，最小的呢，平均情况 有无异常文件--空文件夹 find ./ -maxdepth 1 -type ...
分类：
其他好文 时间：
2021-05-03 12:01:55
阅读次数：
0
01.安装VMware，加载centos镜像软件。配置主机、VMware、Windows的IP地址。 02.hadoop中目录介绍：bin目录 hdfs 、mapred、 yarn 命令 etc目录包含hdfs 、mapred、 yarn 相关的配置文件 sbin 目录与集群相关的命令 share目 ...
分类：
其他好文 时间：
2021-04-29 11:57:44
阅读次数：
0
引入Pandas，用于有关数据处理和分析的环节。 一、读取数据文件 1 .读取excel数据文件 1.1加载Excel表，使用skiprows=1跳过首行【对于一个excel文件，首行一般为字段的定义（标题行），第二行才为数据】 并指定加载的列，注意数据文件的编码，默认utf-8，常用还有gb231 ...
分类：
其他好文 时间：
2021-04-29 11:36:23
阅读次数：
0
