========一.hadoop伪分布式=========
<code>
伪分布式环境配置
需要安装openjdk和openjdk-devel软件包（用的是1.8.0版本）
rpm-qlJava-openjdk-devel-1.8.0|grep‘/bin/javac’
vim/etc/profile
#Java
exportJAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12...
分类：
其他好文 时间：
2017-11-22 17:51:07
阅读次数：
145
环境 ubuntu hadoop2.8.1 java1.8 1.配置java1.8 2.配置ssh免密登录 3.hadoop配置 环境变量 配置hadoop环境文件hadoop-env.sh core-site.xml mapred-site.xml hdfs-site.xml yarn-site. ...
分类：
系统相关 时间：
2017-10-28 23:55:26
阅读次数：
273
由于kafka依赖于zookeeper，所以这里先安装zookeeper。 安装环境 先列一下安装环境： 操作系统：centos 7.2 JDK版本：1.8.1 kafka版本：2.11-0.10.1.1 zookeeper版本：zookeeper-3.4.9 zookeeper的下载、配置、启动 ...
分类：
其他好文 时间：
2017-08-11 13:32:20
阅读次数：
1586
本节内容 1.Spark背景介绍 2.Spark是什么 3.Spark有什么 4.Spark部署 4.1.Spark部署的2方面 4.2.Spark编译 4.3.Spark Standalone部署 4.4.Standalone HA配置 4.5.伪分布式部署 5.Spark任务提交 5.1.Spa ...
分类：
其他好文 时间：
2017-05-07 22:02:05
阅读次数：
246
Zookeeper 可以通过配置不同的配置文件启动 部署环境：CentOS 6.7 Zookeeper 路径： /opt/htools/zookeeper-3.4.6 操作步骤： 1 复制三份zoo.cfg 配置文件，依次命名为 zoo1.cfg zoo2.cfg zoo3.cfg， 之后分别编辑其 ...
分类：
其他好文 时间：
2017-03-31 00:49:03
阅读次数：
241
本文借鉴http://www.cnblogs.com/guozhen/p/5984915.html，在此基础上进行了完善，使之成为一个完整版的伪分布式部署说明，在此记录一下！ 一、本文目的 介绍如何在同一台虚拟机上搭建高可用的Activemq服务，集群数量包含3个Activemq，当Activemq ...
分类：
其他好文 时间：
2017-02-22 16:27:02
阅读次数：
494
转载请注明原地址，谢谢！ 本文目的是教大家配置Hadoop的完全分布式的集群，除了完全分布式还有两种分别是单节点和伪分布式部署。伪分布式只需要一台虚拟机，配置的东西也相对较少，大多用作代码调试，大家稍微查阅资料，或者对我的配置进行一些删减，就可以实现伪分布式，所以我这里还是使用完全分布式，开了三台虚 ...
分类：
其他好文 时间：
2016-03-29 14:32:55
阅读次数：
131
为了测试方便记录下hadoop伪分布式部署：包下载地址：http://archive.cloudera.com/cdh5/cdh/5/我选用的是cdh5.4.5版本etc/profile 配置文件export JAVA_HOME=/home/jdk1.7.0_79export JRE_HOME=/h...
分类：
其他好文 时间：
2016-01-26 18:07:39
阅读次数：
163
