一、安装Hadoop插件 1. 所需环境 hadoop2.0伪分布式环境平台正常运行 所需压缩包:eclipse-jee-luna-SR2-linux-gtk-x86_64.tar.gz 在Linux环境下运行的eclipse软件压缩包,解压后文件名为eclipse hadoop2x-eclipse ...
分类:
系统相关 时间:
2018-10-31 23:25:21
阅读次数:
339
> 1.Linux设置静态IP地址 > 2.修改主机名和映射文件 > 3.SSH免密码配置 > 4.Linux系统JDK的安装和配置 > 5.Hadoop伪分布式配置和测试 > 5.1 测试hdfs和yarn ...
分类:
其他好文 时间:
2018-10-24 22:28:35
阅读次数:
355
环境 - hadoop - 没有zookeeper(用hbase自带的zookeeper,当然后期我会改用独立的zookeeper) HBase介绍 参考:hbase是什么? hbase下载 地址:http://mirrors.shu.edu.cn/apache/hbase/stable/ 我选的是 ...
分类:
其他好文 时间:
2018-10-13 22:41:28
阅读次数:
205
上一节讲到伪分布式部署,启动后需要输入4次密码,停止服务后也要输入4次密码。本节记录免密登陆原理和实践 假设有2台服务器(A和B)(这是配置原理) 1)A需要远程登录B服务器,那么A就要创建密钥对(私钥和公钥) 2)A将公钥传输到B服务器 当A登陆到B时(这是免密登陆原理) 1)B会创建随机字符串, ...
分类:
系统相关 时间:
2018-10-13 15:44:24
阅读次数:
234
Redis集群中至少应该有三个节点。要保证集群的高可用,需要每个节点有一个备份机。Redis集群至少需要6台服务器。 搭建伪分布式。可以使用一台虚拟机运行6个redis实例。 修改redis的端口号7001 7006 使用ruby脚本搭建集群。安装ruby 安装ruby脚本运行使用的包 ruby脚本 ...
分类:
其他好文 时间:
2018-10-07 11:30:11
阅读次数:
178
指导手册02:伪分布式安装Hadoop(ubuntuLinux) Part 1:安装及配置虚拟机 1.安装Linux. 1.安装Ubuntu1604 64位系统 2.设置语言,能输入中文 3.创建hadoop账户 sudo useradd -m hadoop -s /bin/bash sudo pa ...
分类:
系统相关 时间:
2018-10-05 18:57:04
阅读次数:
285
******************* 一定要使这三台机器的用户名相同,安装目录相同 ************* SSH 无密钥登录的简单介绍(之前再搭建本地伪分布式的时候,就生成了,现在这三台机器的公钥私钥都是一样的,所以下面这个不用配置) 单机操作: 生成密钥:命令 ssh-keygen -t ...
分类:
其他好文 时间:
2018-09-29 21:36:07
阅读次数:
229
hadoop2.0介绍 hadoop2.0 功能: HDFS:hadoop的分布式文件系统 运行架构:主从架构 主:namenode 一个 >管理 为解决单点故障添加助理 助理:secondarynamenode >帮助namenode备份数据 但是接替不了namenode的工作 从:datanod ...
分类:
其他好文 时间:
2018-09-28 12:37:29
阅读次数:
171
docker安装elasticsearch伪分布式集群0.在安装es之前,首先编辑一下宿主机的内核参数,否则配置es集群的时候极有可能启动不成功:[root@study-01~]#vim/etc/sysctl.confvm.max_map_count=655360[root@study-01~]#sysctl-p#加载参数1.搜索es的镜像,如下第一个就是官方镜像:2.拉取镜像:[root@stu
分类:
其他好文 时间:
2018-09-26 10:15:16
阅读次数:
427
在Windows系统中开始安装VirtualBox虚拟机后,发现这个软件并不能打开,于是卸载重新安装了虚拟机VMware。 1.安装虚拟机VMware14 2.下载Ubuntu16.0.4 LTS 版本的镜像文件。 3.打开VMware软件,选择《创建虚拟机》;此处选择的是自定义。在网上找一个教程, ...
分类:
其他好文 时间:
2018-09-24 21:13:02
阅读次数:
141