<!-- 指定namenode的所在主机 --> <property> <name>fs.defaultFS</name> <value>hdfs://linux.centos.two:8020</value> </property> <!-- 指定Hadoop临时目录 --> <property> ...
分类:
其他好文 时间:
2017-11-10 00:09:30
阅读次数:
241
1.JDK的安装参考jdk的安装,此处略。2.安装Zookeeper参考我的Zookeeper安装教程中的“完全分布式”部分。3.安装Kafka参考我的Kafka安装教程中的“完全分布式搭建”部分。4.安装Flume参考我的Flume安装教程。5.配置Flume5.1.配置kafka-s.cfg$cd/software/flume/conf/#切换到kafk..
分类:
Web程序 时间:
2017-10-30 21:04:32
阅读次数:
1233
1.选取三台服务器(CentOS系统64位) 114.55.246.88 主节点 114.55.246.77 从节点 114.55.246.93 从节点 之后的操作如果是用普通用户操作的话也必须知道root用户的密码,因为有些操作是得用root用户操作。如果是用root用户操作的话就不存在以上问题。 ...
分类:
其他好文 时间:
2017-10-29 17:32:47
阅读次数:
200
我的环境是:Ubuntu14.04+Hadoop2.6.0+JDK1.8.0_25 官网2.6.0的安装教程:http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/SingleCluster.html 为了方面配 ...
分类:
系统相关 时间:
2017-10-29 13:55:04
阅读次数:
226
前言 本文搭建了一个由三节点(master、slave1、slave2)构成的Hadoop完全分布式集群(区别单节点伪分布式集群),并通过Hadoop分布式计算的一个示例测试集群的正确性。 本文集群三个节点基于三台虚拟机进行搭建,节点安装的操作系统为Centos7(yum源),Hadoop版本选取为 ...
分类:
其他好文 时间:
2017-10-28 20:32:29
阅读次数:
262
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop实现了一个分布式系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错的特点, ...
分类:
其他好文 时间:
2017-09-30 17:48:32
阅读次数:
184
PHP-FPM配置及使用总结: php-FPM是一个PHP FastCGI的管理器,它实际上就是PHP源代码的补丁,旨在将FastCGI进程管理引进到PHP软件包中,我们必须将其patch到PHP源代码中,然后再行编译才能使用。而现在我们可以在PHP 5.3.2及更新版本中直接开启并使用即可,因为P ...
分类:
Web程序 时间:
2017-09-03 20:19:35
阅读次数:
310
原有环境 http://www.cnblogs.com/ilifeilong/p/7406944.html 现计划向集群新增一台datanode,如表格所示 1. 配置系统环境 主机名,ssh互信,环境变量等 2. 修改namenode节点的slave文件,增加新节点信息 3. 在namenode节 ...
分类:
其他好文 时间:
2017-09-02 00:07:17
阅读次数:
247
hbase的安装分为单机模式和完全分布式 单机模式 单机模式的安装很简单, 需要注意hbase自己内置一个zookeeper, 如果使用单机模式, 那么该机器的zookeepr不可以启动 1, 添加java的环境变量 vim {HBASE_HOME}/conf/hbase-env.sh 2, 修改配 ...
分类:
其他好文 时间:
2017-08-23 10:25:16
阅读次数:
172
hbase的完全分布式建立起来了, 可以试下好使不 1, 导包, {HBASE_HOME}/lib 下所有的jar包, 导入 2, 使用junit测试, 会报错, 因为缺少一个jar 3, 获取链接, 只需要提供zookeeper的地址即可 4, 新建表 5, 插入模拟数据 生成模拟rowkey的方 ...
分类:
其他好文 时间:
2017-08-23 10:24:28
阅读次数:
156