修改hosts 创建用户 sudo授权 切换用户 下载解压 创建工作目录 添加环境变量 hadoop/ 修改配置文件 格式化hdfs 启动hdfs/ Yarn 查看启动状态 浏览器查看 [http://mo.don.com:9870]: [http://mo.don.com:8088]: ...
分类:
其他好文 时间:
2019-06-14 12:41:55
阅读次数:
88
讨论QQ:1586558083 目录 一、JDK的安装 1.1 上传安装包并解压 1.2 配置环境变量 1.3 验证Java版本 二、配置配置ssh localhost 2.1 检测 2.2 生成私钥和公钥秘钥对 2.3 将公钥添加到authorized_keys 2.4 赋予authorized_ ...
分类:
其他好文 时间:
2019-06-11 13:10:46
阅读次数:
151
1、配置文件和环境 ①配置hbase-env.sh设置Java安装路径 设置HBase的配置文件路径(/opt/module/hbase/conf)采用HBase自带Zookeeper,设置参数true②配置hbase-site.xml<!--hbase共享目录,持久化hbase数据--><!--配 ...
分类:
其他好文 时间:
2019-05-26 18:20:26
阅读次数:
423
1、传输jdk和Hadoop压缩包 2、解压jdk和hadoop压缩包 3、配置jdk环境和hadoop环境并生效 4、单机模式配置hadoop -env.sh:本地模式没有HDFS和Yarn,配置JDK后MapReduce能够运行java程序。 5、Hadoop伪分布式模式配置 一、5个配置文件 ...
分类:
其他好文 时间:
2019-05-26 17:51:23
阅读次数:
140
一、如何为虚拟机做快照? 1、什么是快照? 快照就是对当前的虚拟机状态进行拍照,保留虚拟机当前状态的操作信息。 2、为什么要为虚拟机做快照? 第一:为克隆不同状态的虚拟机提前做准备。 第二:当对虚拟机的某些操作执行错误而且改正比较麻烦的时候,可以切换到之前正常的虚拟机状态重新进行相关的操作。 3、如 ...
分类:
其他好文 时间:
2019-05-26 00:10:44
阅读次数:
140
上一篇分享了单节点伪分布式集群搭建方法,本篇来分享一下多节点分布式集群搭建方法。多节点分布式集群结构如下图所示: 为了方便查阅,本篇将和上一篇一样从零开始一步一步进行集群搭建。 一、安装Jdk 具体安装步骤可参考 linux安装jdk。 二、安装与配置zookeeper 下载地址:https://w ...
分类:
其他好文 时间:
2019-05-11 13:24:46
阅读次数:
159
hadoop的基本概念伪分布式hadoop集群安装hdfs、MapReduce演示互联网正在从IT走向DT时代。大数据应用分析1、统计类的分析2、推荐类的分析3、机器学习(分类,聚类)4、人工智能、预测(算法)一、什么是hadoop官网:http://hadoop.apache.orghadoop是apache旗下的一套开源软件平台。是一个可靠的、可扩展的、可分布式计算的开源软件。apacheha
分类:
其他好文 时间:
2019-04-19 12:11:49
阅读次数:
176
redis-3.0.0安装 redis-3.0.0安装 redis-3.0.0安装 redis-3.0.0安装 前言 redis是常用的no-sql数据库,常用于缓存数据,同时,他也可以持久化数据。他是C语言开发的,所以安装的时候需要编译。 单机版redis yum install gcc-c++( ...
分类:
其他好文 时间:
2019-04-12 14:56:46
阅读次数:
162
获取zookeeper二进制软件包,地址https://www.apache.org/dyn/closer.cgi/zookeeper/当前稳定版为3.4.14解压文件到自定义目录,这里我解压到/opt/zookeeper下#tar-xfzookeeper-3.4.14.tar.gz-C/opt/#cd/opt/#mvzookeeper-3.4.14/zookeeper进入到zookeeper配置
分类:
其他好文 时间:
2019-04-09 09:27:24
阅读次数:
127
-安装步骤说明: 1、安装jdk的操作 1-1 检查centos6.8自带的jdk 1-2 卸载自带的jdk(使用root帐号) 1-3 解压缩jdk(root帐号) 1-4 配置环境变量 1-5 检查jdk是否生效 2、配置ssh免密登录 2-1 为什么需要配置ssh免密登录: 2-2 安装ssh ...
分类:
其他好文 时间:
2019-04-07 18:06:05
阅读次数:
181