1 前言首先要陪只好HBase，可以参见http://www.cnblogs.com/liuchangchun/p/4096891.html，完全分布式类似2 HBase配置2.1 HUE 配置文件设置，找到hbase标签，配置如下# Comma-separated list of HBase Th...
分类：
其他好文 时间：
2015-08-29 21:36:28
阅读次数：
283
Hadoop安全分布式的Eclipse开发环境配置
安装Eclipse：
详细见教程：http://blog.csdn.net/wang_zhenwei/article/details/48032001
安装Hadoop-Eclipse-Plugin：
下载 hadoop2x-eclipse-plugin ，将 release 中的 hadoop-eclipse-kepler-...
分类：
系统相关 时间：
2015-08-28 17:46:29
阅读次数：
275
文件配置：
（注：修改配置文件需要使用root用户，否则修改失败）
vim /etc/sysconfig/network
修改主机名为：HOSTNAME=Master
vim /etc/sysconfig/network-scripts/ifcfg-eth0
查看IP地址、网关、DNS服务器是否正确
vim /etc/sysconfig/network-scripts/ifcgf-et...
分类：
其他好文 时间：
2015-08-27 15:26:23
阅读次数：
230
本文通过vmware虚拟机加docker，搭建了一个具有三个节点的hadoop完全分布式集群，可对用于学习hadoop、docker、linux等技能。...
分类：
系统相关 时间：
2015-08-25 19:44:39
阅读次数：
871
一、闪回 1.可能的误操作 （1）错误的删除了记录 （2）错误的删除了表 （3）查询历史记录 （4）撤销已经提交了的事务。 2.对应着以上四种类型的误操作，有四种闪回类型 （1）闪回表：将表回退到过去的一个时间上 （2）闪回删除：还原Oracle回收站 ...
分类：
数据库 时间：
2015-08-25 13:18:39
阅读次数：
264
前期准备工作：
1.修改Linux主机名：/etc/hostname
ubuntu系统：vi /etc/hostname
将ubuntu默认的主机名ubuntu改为suh01
2.修改IP：/etc/network/interfaces
修改...
分类：
其他好文 时间：
2015-08-08 16:37:44
阅读次数：
319
Hadoop集群的配置即完全分布式Hadoop配置。本文的实验是基于伪分布式Hadoop环境的。这里默认你的系统已经可以安装伪分布式的Hadoop了。如果你的系统还不能安装伪分布式Hadoop，请参考《Hadoop的学习前奏——在Linux上安装与配置Hadoop》一文完成配置。...
分类：
其他好文 时间：
2015-07-24 20:51:33
阅读次数：
142
我的Spark机群是部署在Yarn上的，因为之前Yarn的部署只是简单的完全分布式，但是后来升级到HA模式，一个主NN，一个备NN，那么Spark HistoryServer的配置也需要相应的做修改，因为不做修改会报错Exception in thread "main" java.lang.refl...
分类：
其他好文 时间：
2015-07-18 10:44:42
阅读次数：
402
继续上文，接着进行介绍2.2编辑hadoop-env.sh由于Hadoop是基于java编写的，所以需要在hadoop-env.sh里设置JDK路径。首先打开/etc/hadoop/hadoop-env.sh文件。找到JAVA_HOME变量，将其修改为export JAVA_HOME=/usr/li...
分类：
系统相关 时间：
2015-07-08 12:39:28
阅读次数：
169
Hadoop平台搭建有三种模式，分别是单机模式、伪分布模式、完全分布模式。单机模式是在单一计算机或者服务器上运行Hadoop，没有分布式的文件上传和任务分配等功能。它执行的流程仍然是Map/Reduce，但是是文件和程序都在本机上，可以看成只有一个节点的Hadoop平台。伪分布模式也是单一计算机.....
分类：
系统相关 时间：
2015-07-08 12:25:53
阅读次数：
173
