Hadoop 的安装（依赖库的安装，ssh设置），环境变量的设置，包括独立模式和 单节点伪分布式模式...
分类：
其他好文 时间：
2015-08-25 19:37:30
阅读次数：
122
Spark注重建立良好的生态系统，它不仅支持多种外部文件存储系统，提供了多种多样的集群运行模式。部署在单台机器上时，既可以用本地（Local）模式运行，也可以使用伪分布式模式来运行；当以分布式集群部署的时候，可以根据自己集群的实际情况选择Standalone模式（Spark自带的模式）、YARN-Client模式或者YARN-Cluster模式。...
分类：
其他好文 时间：
2015-08-19 09:29:03
阅读次数：
241
hadoop的伪分布安装：一台实体机或虚拟机的安装。1.1 设置ip地址 执行命令 service network restart 验证: ifconfig1.2 关闭防火墙 执行命令 service iptables stop 验证: service iptables statu...
分类：
其他好文 时间：
2015-08-15 11:42:42
阅读次数：
103
在hadoop2.5.2伪分布式上，安装了hbase1.0.1.1的伪分布式利用HBase的API创建个testapi的表时，提示Exceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/hadoop/hbase/HBaseCo...
想跑一下Redis集群，但是没有那么多服务器，所以使用伪分布式模式，模拟一下，记录一下安装过程。软件：redis-3.0.3.tar.gz集群正常工作至少需要3个主节点（本示例创建6个节点，3主3从节点）安装前提，要有ruby、rubygems环境，先安装一下：#安装rubyyum --nogpgc...
分类：
其他好文 时间：
2015-08-12 19:11:03
阅读次数：
146
一、Hadoop ? ? 1、Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0+Ubuntu14.4 ? ? ? ??http://www.powerxing.com/install-hadoop/ ? ? 2、Hadoop实例解析-原理解析 ? ? ? ??http://www.tuicool.co...
分类：
其他好文 时间：
2015-08-05 15:09:33
阅读次数：
171
搭建伪分布环境 上传hadoop2.7.0编译后的包并解压到/zzy目录下 mkdir /zzy 解压 tar -zxvf hadoop.2.7.0.tar.gz -C /zzy 配置hadoop 注意：hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop 伪分布式需要修改5个...
分类：
其他好文 时间：
2015-08-04 18:55:39
阅读次数：
156
高吞吐的分布式消息系统相当于一个大缓存架构伪分布式的安装tar -xzf kafka_2.10-0.8.1.1.tgz启动ZK bin/zookeeper-server-start.sh config/zookeeper.properties启动服务 bin/kafka-server-start.s...
分类：
其他好文 时间：
2015-07-31 23:29:13
阅读次数：
202
准备linux环境【java、ip、hostname、hosts、iptables、chkconfig、ssh】下载稳定版2.2.0修改etc/hadoop目录下的配置文件core-site.xml、hdfs-site.xml、yarn-site.xml、mapred-site.xml启动验证文件c...
分类：
其他好文 时间：
2015-07-30 23:04:00
阅读次数：
138
Hadoop的安装和配置可以参考我之前的文章：在Win7虚拟机下搭建Hadoop2.6.0伪分布式环境。本篇介绍如何在Hadoop2.6.0基础上搭建spark1.4.0单机环境。1. 软件准备 scala-2.11.7.tgzspark-1.4.0-bin-hadoop2.6.tgz都可以从官网下...
