继hadoop完全分布式安装后，再结合zookper+hbase安全。在之前环境配置下继续进行。一、zookper安装1.1下载并解压软件cd/softwarewget-chttp://apache.fayea.com/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gztar-zxfzookeeper-3.4.10.tar.gz-C/usr/loc
分类：
其他好文 时间：
2018-05-23 17:00:36
阅读次数：
152
一、概述概念：是一个可靠的、可伸缩的、分布式计算的开源软件。是一个框架，允许跨越计算机集群的大数据及分布式处理，使用简单的编程模型（mapreduce）可从单台服务器扩展至几千台主机，每个节点提供了计算和存储功能。不依赖于硬件处理HA，在应用层面实现特性4V：volumn体量大velocity速度快variaty样式多value价值密度低模块：hadoopcommon公共类库，支持其他模块HDFS
分类：
其他好文 时间：
2018-05-22 16:41:52
阅读次数：
210
说明：在安装zookeeper+Hbase之前，我们应该已经将hadoop集群搭建好了（三个节点），并且验证启动成功。因为HBase是一种构建在HDFS之上的分布式、面向列的存储系 统。 zookeeper 安装及配置 貌似hBase自带的zookeeper只能用作伪分布式，想用于完全分布式要下载外 ...
分类：
其他好文 时间：
2018-05-20 14:14:36
阅读次数：
268
一：搭建的种类 1）本机模式 2）伪分布式模式 3）完全分布式模式 我们先来学习下搭建伪分布式模式。 二：要求 hadoop版本2.7.3，这个版本的hadoop有些小的bug但是不影响使用，电脑要求8G内存，最好加固态硬盘，会大大提升电脑的性能，centos6.5/6.8。 三：安装步骤 1.安装 ...
分类：
其他好文 时间：
2018-05-19 20:42:24
阅读次数：
2484
Hbase安装模式介绍 单机模式1> Hbase不使用HDFS,仅使用本地文件系统2> ZooKeeper与Hbase运行在同一个JVM中 分布式模式– 伪分布式模式1> 所有进程运行在同一个节点上,不同进程运行在不同的JVM当中2> 比较适合实验测试– 完全分布式模式1> 进程运行在多个服务器集群 ...
分类：
其他好文 时间：
2018-04-13 16:16:50
阅读次数：
180
1、将zookeeper-3.4.6.tar.gz解压（例：root目录下） 2、将/root/zookeeper-3.4.6/conf/zoo_simple.cfg修改为zoo.cfg 并修改zookeeper存放文件的目录：dataDir=/tmp/zookeeper 添加： #其中1、2、3是 ...
分类：
其他好文 时间：
2018-04-10 13:23:54
阅读次数：
175
架构 hadoop_env.sh中修改JAVA_HOME core-site.xml <property><name>fs.defaultFS</name><value>hdfs://node1:9000</value></property><property><name>hadoop.tmp.di ...
分类：
其他好文 时间：
2018-03-19 19:05:27
阅读次数：
192
一. 硬件、软件准备 1. 硬件设备 为了方便学习Hadoop，我采用了云服务器来配置Hadoop集群。集群使用三个节点，一个阿里云节点、一个腾讯云节点、一个华为云节点，其中阿里云和腾讯云都是通过使用学生优惠渠道购买了一年的云服务，华为云使用免费7天或15天的云服务器。我决定使用腾讯云节点作为Mas... ...
分类：
其他好文 时间：
2018-03-17 21:43:41
阅读次数：
394
完全分布式Hadoop最大的优势就是分布式集群计算,所以在生产环境下都是搭建的最后一种模式:完全分布模式技术准备系统规划搭建测试上线使用HDFS端口8020namenodeRPC交互端口core-site.xml50070NameNodeweb管理端口hdfs-site.xml50010datanode 控制端口hdfs-site.xml50020datanode的RPC服务器地址和端口hdfs-
分类：
其他好文 时间：
2018-03-06 17:06:15
阅读次数：
183
之前的两篇文章介绍了如何从0开始到搭建好带有JDK的Ubuntu的过程，本来这篇文章是打算介绍搭建伪分布式集群的。但是后来想想反正伪分布式和完全分布式差不多，所幸直接介绍完全分布式了。 如果你想自己搭建伪分布式玩的话，参考：在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境 - ...
分类：
系统相关 时间：
2018-03-06 10:20:02
阅读次数：
279
