一、首先创建一个新用户： sudo adduser hadoop 其次设置密码： sudo passwd hadoop 如果无法使用root密码，请输入如下命令: sudo passwd root 二、更改用户权限sudo, 更改/etc/sudosers文件 cd /etc sudo vim /e ...
分类：
系统相关 时间：
2019-08-18 14:06:29
阅读次数：
109
首先我们阅读以下源码，类名是FileInputFormat.class 根据源代码而知： max(minSize, min(maxSize,blockSize)) min(maxSize,blockSize)取maxSize,blockSize之间的最小值 max(minSize, min())取m ...
分类：
编程语言 时间：
2018-11-18 02:14:36
阅读次数：
234
原文链接：https://blog.csdn.net/lylcore/article/details/9136555 hadooop提供了一个设置map个数的参数mapred.map.tasks，我们可以通过这个参数来控制map的个数。但是通过这种方式设置map的个数，并不是每次都有效的。原因是ma ...
分类：
其他好文 时间：
2018-05-18 23:28:33
阅读次数：
232
【注】该系列文章以及使用到安装包/测试数据 可以在《倾情大奉送--Spark入门实战系列》获取 1、编译Hadooop 1.1 搭建环境 1.1.1 安装并设置maven 1. 下载maven安装包，建议安装3.0以上版本，本次安装选择的是maven3.0.5的二进制包，下载地址如下 http:// ...
分类：
其他好文 时间：
2017-12-06 13:16:16
阅读次数：
241
【注】该系列文章以及使用到安装包/測试数据 能够在《[倾情大奉送–Spark入门实战系列] (http://blog.csdn.net/yirenboy/article/details/47291765)》获取 1 编译Hadooop 1.1 搭建好开发环境 1.1.1 安装并设置maven 1.下 ...
分类：
其他好文 时间：
2017-08-20 11:18:49
阅读次数：
178
【注】该系列文章以及使用到安装包/测试数据 可以在《倾情大奉送--Spark入门实战系列》获取 1、编译Hadooop 1.1 搭建环境 1.1.1 安装并设置maven 1. 下载maven安装包，建议安装3.0以上版本，本次安装选择的是maven3.0.5的二进制包，下载地址如下 http:// ...
分类：
其他好文 时间：
2016-06-03 15:41:37
阅读次数：
122
hadooop提供了一个设置map个数的参数mapred.map.tasks，我们可以通过这个参数来控制map的个数。但是通过这种方式设置map 的个数，并不是每次都有效的。原因是mapred.map.tasks只是一个hadoop的参考数值，最终map的个数，还取决于其他的因素。 为了方便介绍，先
分类：
其他好文 时间：
2016-02-22 19:10:21
阅读次数：
190
修改host[root@hadoop1tmp]#cat/etc/hosts127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4.localdomain4::1localhostlocalhost.localdomainlocalhost6localhost6.localdomain6192.168.16.104hadoop1[root@hadoop1tmp]#[root@hadoop1tmp]#cat/etc/sysconfig/netwo..
分类：
其他好文 时间：
2015-03-30 19:03:39
阅读次数：
136
Zookeeper的环境配置一、Zookeeper的搭建方式 Zookeeper安装方式有三种，单机模式和集群模式以及伪集群模式。 单机模式：Zookeeper只运行在一台服务器上，适合测试环境； 伪集群模式：就是在一台物理机上运行多个Zookeeper 实例。 集群模式：Zookeeper...
分类：
其他好文 时间：
2014-10-27 17:07:11
阅读次数：
208
