操作系统： windows hadoop 2.7.4 namenode:192.168.233.135 datanode: 192.168.233.134/131 1.下载hadoop-eclipse-plugin-xxx.jar(https://github.com/winghc/hadoop2x ...
分类：
系统相关 时间：
2018-03-06 15:36:13
阅读次数：
174
引言 在 "大数据学习系列之一 Hadoop环境搭建(单机)" 成功的搭建了Hadoop的环境，在 "大数据学习系列之二 HBase环境搭建(单机)" 成功搭建了HBase的环境以及相关使用介绍。本文主要讲解如何搭建Hadoop+Hive的环境。 一、环境准备 1，服务器选择 本地虚拟机 操作系统: ...
分类：
其他好文 时间：
2017-12-16 11:09:36
阅读次数：
228
一、环境选择 1，服务器选择 阿里云服务器:入门型(按量付费) 操作系统:linux CentOS 6.8 Cpu：1核 内存：1G 硬盘:40G ip:39.108.77.250 2，配置选择 JDK:1.8 （jdk 8u144 linux x64.tar.gz） Hadoop:2.8.2 (h ...
分类：
其他好文 时间：
2017-12-10 17:01:52
阅读次数：
182
配置Linux静态IP 1. 配置 vi /etc/sysconfig/network scripts/ifcfg ens33 2. 测试是否联网 修改主机名 1. hostname 2. windows本机host配置 C:\Windows\System32\drivers\etc\hosts 3 ...
分类：
其他好文 时间：
2017-11-17 14:55:56
阅读次数：
166
目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会，比如在HDFS上运行示例程序或简单作业等。 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和 ...
分类：
其他好文 时间：
2017-09-26 13:36:56
阅读次数：
182
由于要近期使用hadoop等进行相关任务执行，操作linux时候就多了 以前只在linux上配置J2EE项目执行环境，无非配置下jdk，部署tomcat，再通过docker或者jenkins自动部署上去 看下进程，复制粘贴删除等基本操作，很多东西久了不用就忘了，所有写个demo巩固下曾经的linux ...
分类：
系统相关 时间：
2017-09-02 16:55:21
阅读次数：
301
搭建參看： http://blog.csdn.net/w13770269691/article/details/16883663/ 查看集群状态： [root@master bin]# hdfs dfsadmin -report Configured Capacity: 36729053184 (3 ...
分类：
其他好文 时间：
2017-08-19 17:07:59
阅读次数：
188
一、在Ubuntu下创建hadoop用户组合hadoop用户 1、创建hadoop用户组 addgroup hadoop 2、创建hadoop用户 adduser -ingroup hadoop hadoop 3、为hadoop用户添加权限 vim /etc/sudoers 4、切换到hadoop用 ...
分类：
系统相关 时间：
2017-08-09 23:47:25
阅读次数：
279
在hadoop环境搭建完成后，接下来就是要把sqoop整合进来，使其可以利用hadoop和mysql-connector-java来从MySQL中抽取数据并转存到hdfs上。1.将得到的sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz解压到/usr/local/下，并建立/usr/local/sqoop软链接。mvsqoop-1.4.6.bin__hadoop-..
分类：
其他好文 时间：
2017-08-09 01:12:59
阅读次数：
616
恢复内容开始 ①解压Hadoop到自定目录下面（这里解压到/opt/hadoop目录下） tar -zxvf hadoop-2.5.0.tar.gz -C /opt/hadoop ②清理Hadoop目录，删除/opt/hadoop/hadoop-2.5.0/share/doc 文件 rm -rf / ...
分类：
其他好文 时间：
2017-08-06 15:54:41
阅读次数：
171
