单机模式(standalone)单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS..
分类:
系统相关 时间:
2016-11-23 08:27:53
阅读次数:
387
运行kafka ,需要依赖 zookeeper,你可以使用已有的 zookeeper 集群或者利用 kafka自带的zookeeper。 单机模式,用的是kafka自带的zookeeper, 分布式模式,用的是外部安装的zookeeper,即公共的zookeeper。 见博客 4 kafka集群部署 ...
分类:
其他好文 时间:
2016-11-17 12:41:07
阅读次数:
150
http://zookeeper.apache.org/releases.html#download 下载解压到(我自己的)解压到 /usr/local 下 把名字改成 zookeeper 进入zookeeper目录下的conf目录,复制zoo_sample.cfg为zoo.cfg,并将内容修改如下 ...
分类:
其他好文 时间:
2016-11-17 07:51:35
阅读次数:
233
环境:VirtualBox:5.1.6Centos:7Java:1.8Zookeeper:3.4.9VirtualBox搭建的三个Zookeeper环境。三个虚拟机的单机模式都正常:[root@centos_1data]#zkServer.shstatus
ZooKeeperJMXenabledbydefault
Usingconfig:/opt/zookeeper-3.4.9/bin/../conf/zoo.cfg
Mode:standalone从..
分类:
其他好文 时间:
2016-11-04 02:29:22
阅读次数:
1092
1、下载spark,解压2、复制conf/spark-env.sh和conf/log4j.properties 3、编辑spark-env.sh,设置SPARK_LOCAL_IP,docker-1为主机名,对应IP为10.10.20.204 4、运行example,执行如下命令 5、启动shell ...
分类:
其他好文 时间:
2016-10-25 18:53:00
阅读次数:
164
zookeeper下载地址:http://zookeeper.apache.org/releases.html#download 本次使用的是3.4.9版本 前提:请安装JDK 安装: 各项含义: 4.配置完成后,双机bin目录下的zkServer.cmd启动 5.检查服务是否启动,可以通过 net ...
#下载: #单机模式 解压到合适目录. 进入zookeeper目录下的conf子目录, 复制zoo_sample.cfg-->zoo.cfg(如果没有data和logs就新建):tickTime=2000 dataDir=/Users/apple/zookeeper/data dataLogDir= ...
分类:
其他好文 时间:
2016-10-19 13:33:33
阅读次数:
142
本博文的主要内容有 kafka的单机模式部署 kafka的分布式模式部署 生产者java客户端编程 消费者java客户端编程 运行kafka ,需要依赖 zookeeper,你可以使用已有的 zookeeper 集群或者利用 kafka自带的zookeeper。 单机模式,用的是kafka自带的zo ...
分类:
编程语言 时间:
2016-10-16 11:53:04
阅读次数:
527
本博文的主要内容有 .storm单机模式,打包,放到storm集群 .Storm的并发机制图 .Storm的相关概念 .附PPT 打包,放到storm集群去。我这里,是单机模式下的storm。 weekend110-storm -> Export -> JAR file -> 当然,这边,肯定是,准 ...
分类:
其他好文 时间:
2016-10-16 09:43:35
阅读次数:
574
本博文的主要内容有 .Storm的单机模式安装 .Storm的分布式安装(3节点) .No space left on device .storm工程的eclipse的java编写 http://storm.apache.org/ 分布式的一个计算系统,但是跟mr不一样,就是实时的,实时的跟Mr离线 ...
分类:
其他好文 时间:
2016-10-16 00:46:55
阅读次数:
718