一、HDFS伪分布式环境搭建 Hadoop的三种运行模式(启动模式) -格式化文件系统 -格式化文件系统 HDFS公开了文件系统名称空间,允许用户将数据存储在文件中,就好比我们平时使用操作系统中的文件系统一样,用户无需关心底层是如何存储数据的。而在底层,一个文件会被分成一个或多个数据块,这些数据库块 ...
分类:
其他好文 时间:
2018-05-09 19:25:57
阅读次数:
203
Hadoop集群搭建 发行版本集群简介HDFS集群负责海量数据的存储YARN集群负责海量数据运算时的资源调度MapReduceHadoop部署方式分类集群按以上分布的原因具体搭建步骤搭建前准备1.准备Linux环境1.0 配置好各虚拟机的网络(采用NAT联网模式)1.1修改各个虚拟机主机名1.2修改... ...
分类:
其他好文 时间:
2018-05-09 12:06:57
阅读次数:
176
转 https://blog.csdn.net/a491857321/article/details/52814045 rabbitmq集群搭建 2016年10月14日 11:28:14 阅读数:629 2016年10月14日 11:28:14 阅读数:629 阅读数:629 集群概述 通过 Erl ...
分类:
其他好文 时间:
2018-05-05 16:44:49
阅读次数:
153
推荐参考教程:https://blog.csdn.net/pucao_cug/article/details/69250101 错误: from /usr/lib/ruby/2.3.0/rubygems/core_ext/kernel_require.rb:55:in `require' from ...
分类:
其他好文 时间:
2018-04-30 15:38:30
阅读次数:
191
HADOOP是apache旗下的一套开源软件平台,利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理。 ...
分类:
其他好文 时间:
2018-04-29 14:28:52
阅读次数:
228
docker swarm集群 docker swarm集群搭建起来也非常简单: 主要牵扯到如下几个一级子命令:命令格式如下:docker init 初始化一个docker swarm集群 join 向几个swarm集群中添加一个工作节点或者是管理节点 join-token 管理集群节点中的令牌tok ...
分类:
其他好文 时间:
2018-04-27 12:20:34
阅读次数:
117
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。 ...
分类:
其他好文 时间:
2018-04-25 22:12:15
阅读次数:
251
Mycat+Mysql的读写分离 前言: 在MySQL中间件出现之前,对于MySQL主从集群,如果要实现其读写分离,一般是在程序端实现,这样就带来一个问题,即数据库和程序的耦合度太高,如果我数据库的地址发生改变了,那么我程序端也要进行相应的修改,如果数据库不小心挂掉了,则同时也意味着程序的不可用,而 ...
分类:
其他好文 时间:
2018-04-25 15:54:53
阅读次数:
182