团队项目进展 Hadoop环境已经初步搭建完成，前台界面的设计也在进行着，基本在按照计划进行。 明日计划：Hadoop环境搭建完成后，开始主要代码的编写 ...
分类：
其他好文 时间：
2016-09-05 10:23:17
阅读次数：
86
前提条件： 1、一台配置好hadoop环境的虚拟机。hadoop环境搭建教程：稍后补充 2、存在hadoop账户。不存在的可以新建hadoop账户安装配置hadoop。 安装教程： 一、Mysql安装 1、安装mysql命令:Yum install mysql-server -y （-y参数作用为所 ...
分类：
其他好文 时间：
2016-08-20 13:10:14
阅读次数：
122
Hadoop 2、配置HDFS HA (高可用) 前提条件 先搭建 http://www.cnblogs.com/raphael5200/p/5152004.html 的环境，然后在其基础上进行修改 一、安装Zookeeper 由于环境有限，所以在仅有的4台虚拟机上完成多个操作； a.在4台虚拟中选 ...
分类：
其他好文 时间：
2016-05-26 13:06:36
阅读次数：
243
首先是来说一下这两天来自己的个人感受吧。我争取在第一段将情怀给逼逼完，大家可以无视这一段~~~真心是不容易，第一个感觉就是，乱。为啥呢？先说说我使用Hadoop的原因吧。选了云计算这门课，打算到时候深入研究大数据，也就要好好学咯。第一个学生研究课题是Hadoop环境搭建，据说是从选软件（也就是第一个 ...
分类：
其他好文 时间：
2016-05-20 00:38:55
阅读次数：
242
目 录
1.应用介绍 3
1.1实验环境介绍 3
1.2应用背景介绍 3
1.3应用的意义与价值 4
2.数据及存储 5
2.1数据来源及数据量 5
2.2数据存储解决方案 5
3.分析处理架构 5
3.1架构设计和处理方法 5
3.2核心处理算法代码 7
4.系统实现 9
5.总结 271.应用介绍
1.1实验环境介绍
本实验是在hadoo...
分类：
其他好文 时间：
2016-05-13 14:49:38
阅读次数：
278
hadoop环境搭建相对麻烦，需要安装虚拟机过着cygwin什么的，所以通过查资料和摸索，在window上搭建了一个，不需要虚拟机和cygwin依赖，相对简便很多。
下面运行步骤除了配置文件有部分改动，其他都是参照hadoop下载解压的share/doc/index.html。
hadoop下载：http://apache.opencas.org/hadoop/common...
hadoop环境搭建相对麻烦，需要安装虚拟机过着cygwin什么的，所以通过查资料和摸索，在window上搭建了一个，不需要虚拟机和cygwin依赖，相对简便很多。
下面运行步骤除了配置文件有部分改动，其他都是参照hadoop下载解压的share/doc/index.html。
hadoop下载：http://apache.opencas.org/hadoop/common...
一，准备环境：
1，64位ubuntu-14.04.4
2，jdk-7u80-linux-x64二，配置jdk:
1，输入命令语句：
2，写入配置信息:
3，使配置信息起作用：
4,jdk搭建成功：
三，hadoop的配置：
1，解压hadoop:
hadoop@...
分类：
其他好文 时间：
2016-04-21 07:31:55
阅读次数：
160
一、本文说明：本次测试在五台虚拟机系统上进行完全分布式搭建。Hadoop分布式模式是在多台机器上分布式部署，配置非常类似于伪分布式，名称节点和数据节点都分布在不同的主机上，每台数据节点上都有相应的任务调度。二、环境说明：虚拟软件：VM10.0操作系统：CentOs6.7hadoop版..
分类：
其他好文 时间：
2016-04-14 22:44:22
阅读次数：
262
一、本文说明：
本次测试在一台虚拟机系统上进行伪分布式搭建。Hadoop伪分布式模式是在单机上模拟Hadoop分布式，单机上的分布式并不是真正的伪分布式，而是使
用线程模拟分布式。Hadoop本身是无法区分伪分布式和分布式的，两种配置也很相似。唯一不同的地方是伪分布式是在单机..
分类：
其他好文 时间：
2016-04-13 21:01:18
阅读次数：
452
