本篇介绍两种HBase的安装方式:本地安装方式和伪分布式安装方式。安装的前提条件是已经安装成功了hadoop,并且hadoop的版本号要和hbase的版本号相匹配。我将要安装的hbase是hbase-0.94.11版本号,须要的hadoop是hadoop-1.2.1版本号。hbase下载地址:htt...
分类:
其他好文 时间:
2015-02-28 15:59:59
阅读次数:
173
【简介】1、hdfs架构hdfs伪分布式架构只需要有三个部分即可,NameNode是老大,DataNode是小弟,SecondaryNameNode是助理。客户端Client跟NameNode通信(RPC通信机制,后面会介绍),SecondaryNameNode负责数据的同步。2、元数据的存储细节NameNode的元数据是存放在内存当中的。..
分类:
其他好文 时间:
2015-02-25 23:52:18
阅读次数:
146
一、准备linux环境1、更改VMware适配器设置由于是在单机环境下进行学习的,因此选择适配器模式是host-only模式,如果想要联网,可以选择桥接模式,配置的方式差不多。点击VMware快捷方式,右键打开文件所在位置->双击vmnetcfg.exe->VMnet1host-only->修改subnetip设置..
分类:
其他好文 时间:
2015-02-24 23:29:19
阅读次数:
273
一、HBase(NoSQL)的数据模型
1.1 表(table),是存储管理数据的。
1.2 行键(row key),类似于MySQL中的主键,行键是HBase表天然自带的,创建表时不需要指定
1.3 列族(column family),列的集合。
一张表中有多个行健,一个行健读取出来的是一条记录,列族和MySQL中的列差不多,但是它是列的集合
HBase中列族是需要在定义表时指定的,列...
分类:
其他好文 时间:
2015-02-13 21:15:33
阅读次数:
217
、下载scala2.11.5版本,下载地址为:http://www.scala-lang.org/download/2.11.5.html 2、安装和配置scala: 第一步:上传scala安装包 并解压 第二步 配置SCALA_HOME环境变量到bash_profile 第三步 source 使配置...
分类:
其他好文 时间:
2015-02-09 12:59:33
阅读次数:
255
1、下载scala2.11.5版本,下载地址为:
2、安装和配置scala:...
分类:
其他好文 时间:
2015-02-09 12:54:09
阅读次数:
160
我是接着用上次已经部署好的环境,故已经有ssh以及java。没有安装这两个的朋友可以看本人关于伪分布式安装的博文。首先是输入命令sudo apt-get install g++ autoconf automake libtool make cmake zlib1g-dev pkg-config li...
分类:
其他好文 时间:
2015-02-06 00:41:14
阅读次数:
212
1、安装环境是vmware workstation10.0模拟出三个虚拟节点,每一个节点安装Ubuntu12.04 LTS操作系统,主机名分别是hadoop1、hadoop2以及hadoop3.同时在每一个节点安装好java。安装方法同之前介绍的伪分布式安装方法一样。2、接着是对三个节点的hosts...
分类:
其他好文 时间:
2015-02-04 23:22:19
阅读次数:
277
实现真正的分布式的hadoop,并不是伪分布式的。一、系统与配置共准备2台机器搭建Hadoop集群。基于Ubuntu14.04,jdk1.6.0_45,Hadoop1.0.3版本,虚拟机使用VMware10.0192.168.1.10 NameNode master (master)192.168....
分类:
系统相关 时间:
2015-02-04 16:29:23
阅读次数:
208
首先安装双系统进行伪分布式实验,安装win7+ubuntu双系统:1、右键单击“我的电脑”进入“管理”,双击“存储”,再双击“磁盘管理”,在D盘位置右击“压缩卷”,分出一个大小为50G的磁盘空间,然后格式化,之后再删除卷,作为安装ubuntu系统所用。2、下载安装easyBCD软件,新建一个Neo ...