码迷,mamicode.com
首页 >  
搜索关键字:全分布式    ( 311个结果
Hadoop完全分布式搭建 --- XML配置文件
<!-- 指定namenode的所在主机 --> <property> <name>fs.defaultFS</name> <value>hdfs://linux.centos.two:8020</value> </property> <!-- 指定Hadoop临时目录 --> <property> ...
分类:其他好文   时间:2017-11-10 00:09:30    阅读次数:241
Flume+Kafka+Zookeeper搭建大数据日志采集框架
1.JDK的安装参考jdk的安装,此处略。2.安装Zookeeper参考我的Zookeeper安装教程中的“完全分布式”部分。3.安装Kafka参考我的Kafka安装教程中的“完全分布式搭建”部分。4.安装Flume参考我的Flume安装教程。5.配置Flume5.1.配置kafka-s.cfg$cd/software/flume/conf/#切换到kafk..
分类:Web程序   时间:2017-10-30 21:04:32    阅读次数:1233
Spark2.1.0完全分布式环境搭建
1.选取三台服务器(CentOS系统64位) 114.55.246.88 主节点 114.55.246.77 从节点 114.55.246.93 从节点 之后的操作如果是用普通用户操作的话也必须知道root用户的密码,因为有些操作是得用root用户操作。如果是用root用户操作的话就不存在以上问题。 ...
分类:其他好文   时间:2017-10-29 17:32:47    阅读次数:200
Ubuntu14.04安装配置Hadoop2.6.0(完全分布式)与 wordcount实例运行
我的环境是:Ubuntu14.04+Hadoop2.6.0+JDK1.8.0_25 官网2.6.0的安装教程:http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/SingleCluster.html 为了方面配 ...
分类:系统相关   时间:2017-10-29 13:55:04    阅读次数:226
Hadoop完全分布式环境搭建
前言 本文搭建了一个由三节点(master、slave1、slave2)构成的Hadoop完全分布式集群(区别单节点伪分布式集群),并通过Hadoop分布式计算的一个示例测试集群的正确性。 本文集群三个节点基于三台虚拟机进行搭建,节点安装的操作系统为Centos7(yum源),Hadoop版本选取为 ...
分类:其他好文   时间:2017-10-28 20:32:29    阅读次数:262
Hadoop全分布式集群环境配置
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop实现了一个分布式系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错的特点, ...
分类:其他好文   时间:2017-09-30 17:48:32    阅读次数:184
PHP性能调优---PHP-FPM配置及使用总结
PHP-FPM配置及使用总结: php-FPM是一个PHP FastCGI的管理器,它实际上就是PHP源代码的补丁,旨在将FastCGI进程管理引进到PHP软件包中,我们必须将其patch到PHP源代码中,然后再行编译才能使用。而现在我们可以在PHP 5.3.2及更新版本中直接开启并使用即可,因为P ...
分类:Web程序   时间:2017-09-03 20:19:35    阅读次数:310
Hadoop 2.7.3 完全分布式维护-动态增加datanode篇
原有环境 http://www.cnblogs.com/ilifeilong/p/7406944.html 现计划向集群新增一台datanode,如表格所示 1. 配置系统环境 主机名,ssh互信,环境变量等 2. 修改namenode节点的slave文件,增加新节点信息 3. 在namenode节 ...
分类:其他好文   时间:2017-09-02 00:07:17    阅读次数:247
27-hadoop-hbase安装
hbase的安装分为单机模式和完全分布式 单机模式 单机模式的安装很简单, 需要注意hbase自己内置一个zookeeper, 如果使用单机模式, 那么该机器的zookeepr不可以启动 1, 添加java的环境变量 vim {HBASE_HOME}/conf/hbase-env.sh 2, 修改配 ...
分类:其他好文   时间:2017-08-23 10:25:16    阅读次数:172
28-hadoop-hbase入门小程序
hbase的完全分布式建立起来了, 可以试下好使不 1, 导包, {HBASE_HOME}/lib 下所有的jar包, 导入 2, 使用junit测试, 会报错, 因为缺少一个jar 3, 获取链接, 只需要提供zookeeper的地址即可 4, 新建表 5, 插入模拟数据 生成模拟rowkey的方 ...
分类:其他好文   时间:2017-08-23 10:24:28    阅读次数:156
311条   上一页 1 ... 13 14 15 16 17 ... 32 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!