对于Hadoop来说，最主要的是两个方面，一个是分布式文件系统HDFS，另一个是MapReduce计算模型，搭建Hadoop的运行环境主要分为三种：独立模式环境、伪分布式环境、完全分布式环境。一、独立模式：也叫单机模式。这种模式在一台单机上运行，没有分布式文件系统，而是直接读写本地..
分类：
其他好文 时间：
2016-04-13 00:43:24
阅读次数：
143
1、hadoop环境搭建，版本：2.6.2，参考：http://www.cnblogs.com/bookwed/p/5251393.html 启动服务：在master机器上，进入hadoop安装目录，执行命令：./sbin/start-all.sh 查看是否启动成功：jps 2、zookeeper环 ...
分类：
其他好文 时间：
2016-03-30 12:31:32
阅读次数：
112
首先我这里只是一个简单的hdfs查询程序，并没有搭建Hadoop环境，搭建环境还需去看详细教程。 报错：Failed to locate the winutils binary in the hadoop binary path ?? java.io.IOException: Could not locat...
官网上的教程版本不符,还过于简单(很多必要的步骤没提到),
所以自行网上找教程.
在这里整理一下:
假设java_home已经配置完成,ssh也可连通
1.修改配置文件
以下文件均在 %HADOOP_HOME%/conf/ 下
core-site.xml: Hadoop Core的配置项，例如HDFS和MapReduce常用的I/O设置等。
hdfs-sit...
分类：
其他好文 时间：
2015-08-31 23:44:50
阅读次数：
269
一.安装Java1.下载以及安装官网下载jdk，我下载的是1.8.0_45网址：http://www.oracle.com/technetwork/java/javase/downloads/index-jsp-138363.html如下所示：然后安装，默认安装路径是：/Library/Java/J...
分类：
系统相关 时间：
2015-07-04 19:45:57
阅读次数：
264
一、安装Java JDK1.1在这里有jdk1.7的下载http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html如果CPU是32位，选择下载linux x86，如果CPU是64位的，选择下载...
分类：
其他好文 时间：
2015-06-09 19:27:05
阅读次数：
141
大数据定义是：大量的非结构话的数据。量要大，要非结构化。Hadoop分三部分组成，1.hdfshadoop分布式文件系统。2.MapReduce分布式计算。3.hive分布式存储。操作系统：centos6.564环境搭建：1.安装Hadoop，2.安装mysql，3.安装hive，4，安装jdkHadoop安装：下载Hadoop1.0.4，had..
分类：
其他好文 时间：
2015-05-17 23:48:02
阅读次数：
521
准备环境先下载htrace-core-3.0.4.jar文件官网链接：http://mvnrepository.com/artifact/org.htrace/htrace-core/3.0.4copy到Hadoop的share/hadoop/common/lib目录下避免出现错误找不到文件的错误。...
一直关注Hadoop的项目，最近发现可以在windows下面搭建Hadoop。决定试试。闲话少叙，言归正传先准备好一个windows 7 32位的环境,（官网上说不支持64位的，编译会出问题，没有说原因，如果要在windows 64位的机器上使用，可以在32位的环境下编译成64位的，然后部署到6.....
