hadoop入门（二） hadoop的配置 1.本地模式 2.伪分布式 3.分布式 一、配置linux环境： 1打开虚拟网络编辑器，选择 VMnet1 仅主机模式， 子网 IP 设为 192.168.1.0 ，子网掩码设为 255.255.255.0 2.增加用户组 创建用户： adduser 用户 ...
分类：
其他好文 时间：
2018-09-21 17:37:20
阅读次数：
166
1. 创造日志handler： 在status_only模式，不需要日志以及UI 2. 取得ui模块并设置特征集： 3. 远程模式下返回远程server连接： 4. 本地模式下返回本地server连接： 5. 清理日志handler，返回服务器连接以及ui模块： ...
分类：
其他好文 时间：
2018-09-18 00:25:16
阅读次数：
275
（1）本周做了什么，花在学习上多长时间，花在代码时间上多长时间，花在解决问题用了多长时间。 学习了Linux环境安装，Hadoop本地模式安装及伪分布式模式安装 学习：2天 代码：1天 解决问题：半天 （2）下周准备做什么？ 学习Hadoop相关知识 （3）本周遇到的问题？ 安装好后，web查看ha ...
分类：
其他好文 时间：
2018-09-01 14:36:25
阅读次数：
132
spark支持的运行模式：本地模式、本地集群模式、standalone模式、yarn模式及mesos模式。
分类：
其他好文 时间：
2018-08-26 01:21:58
阅读次数：
142
说明：Hbase部署模式有以下三种（1）本地模式：本地模式不依赖于HDFS存储，将文件存储到操作系统本地目录，好处是我们不需要搭建HDFS集群，即可学些HBase相关命令及客户端操作。（2）伪分布模式：一台机器完成Hbase所有组件的配置，需要依赖HDFS分布式存储（3）全分布模式：多机部署，一般情况下Hmaster和HregionServer分布在不同的服务器，需要依赖底层HDFS分布式存储。一
分类：
其他好文 时间：
2018-08-13 10:51:22
阅读次数：
199
说明：Hbase部署模式有以下三种（1）本地模式：本地模式不依赖于HDFS存储，将文件存储到操作系统本地目录，好处是我们不需要搭建HDFS集群，即可学些HBase相关命令及客户端操作。（2）伪分布模式：一台机器完成Hbase所有组件的配置，需要依赖HDFS分布式存储（3）全分布模式：多机部署，一般情况下Hmaster和HregionServer分布在不同的服务器，需要依赖底层HDFS分布式存储。一
分类：
其他好文 时间：
2018-08-12 14:17:22
阅读次数：
159
功能说明：rsync是一款开源、快速的、多功能的、可实现全量及增量的本地或远程数据镜像同步备份的游戏工具。rsync适用于Unix/Linux/windows等多种操作系统平台。 rsync命令三种模式： 1.本地模式 rsync [选项] [源文件] [目标文件] 2.通过远程shell访问模式 ...
分类：
其他好文 时间：
2018-08-03 23:12:49
阅读次数：
185
前言:rsync是一款开源的，快速的，多功能的(cp,scp,rm),可实现全量及增量的本地或远程数据镜像同步备份的优秀软件工具。rsync适用于Unix/Linux/Windows等多种操作系统平台。本文主要讲解rsync的三种常见的文件同步模式，即:本地模式,通过远程shell访问模式,rsync守护进程模式,以及其在企业生产产景中的实际应用。
分类：
系统相关 时间：
2018-07-29 17:50:09
阅读次数：
195
HBase 系列（二）安装部署 本节以 Hadoop 2.7.6，HBase 1.4.5 为例安装 HBase 环境。HBase 也有三种模式：本地模式、伪分布模式、分布模式。 一、环境准备 __(1) HBase 下载__ HBase 下载地址： __(2) SSH 服务__ service ss ...
分类：
其他好文 时间：
2018-07-15 21:20:06
阅读次数：
292
一、安装HBase： 我这里选择的是hbase-1.3.1-bin.tar.gz版本解压HBase： 配置HBase的环境变量: 生效环境变量： 二、HBase的安装模式： 1、本地模式： 修改两个配置文件： 2、伪分布式模式： 特点：具备HBase的所有功能 修改两个配置文件： 添加java环境变 ...
分类：
其他好文 时间：
2018-07-05 16:04:24
阅读次数：
153
