1.安装JDK1.8,下载安装包解压至 /usr/lib/jdk #配置路径 2.之前已经安装好SSH,现在设置免密码登录 测试设置是否成功 3.下载Hadoop2.6.0,解压至/home/super/software/hadoop 设置环境变量 添加 使环境生效 【ps:在后续出现start-a ...
分类:
系统相关 时间:
2019-03-17 18:19:36
阅读次数:
166
一、安装ubuntu操作系统 参考:https://www.cnblogs.com/Alier/p/6337151.html 二、下载hadoop以及hive hadoop:https://hadoop.apache.org/releases.html hive:http://hive.apache ...
分类:
系统相关 时间:
2019-03-12 21:22:42
阅读次数:
230
flume伪分布式安装: 1、导包:apache-flume-1.7.0-bin.tar.gz 2、配置环境变量:/etc/profile export FLUME_HOME=/yang/apache-flume-1.7.0-bin export PATH=$PATH:$FLUME_HOME/bin ...
分类:
Web程序 时间:
2019-02-21 12:57:44
阅读次数:
233
一、虚拟机安装centos7需要显示IPv4地址时设置 修改ip addr 中显示ipv4 1. 修改 ONBOOT=no 为 ONBOOT=yes, 2. 同时需要添加HWADDR=00:0c:29:c8:b6:a7,其中后缀mac地址需要填写ip addr中ech33的ip6的mac 00:0c ...
分类:
其他好文 时间:
2019-01-27 22:00:23
阅读次数:
181
前言 由于最近在项目中接触使用到了ElasticSearch,从本篇博客开始将给大家分享这款风靡全球的产品。将涉及到ElasticSearch的安装、基础概念、基本用法、高级查询、中文分词器、与SpringBoot集成进行接口开发等相关知识。 ElasticSearch简述 如果大家接触过大数据的话 ...
分类:
其他好文 时间:
2019-01-17 20:02:44
阅读次数:
216
注意先起动第一台 由于没有选举结果 status显示报错 立即启动第二台,则第一台,第二台 status不报错 再启动第三台 4.1 分布式安装部署 0)集群规划 在hadoop2、hadoop3和hadoop4三个节点上部署Zookeeper。 1)解压安装 (1)解压zookeeper安装包到/ ...
分类:
其他好文 时间:
2019-01-04 12:16:18
阅读次数:
173
hadoop的伪分布式安装流程如下所示: 其中core-site.xml和hdfs-site.xml是两个很重要的配置文件。 core-site.xml hadoop.tmp.dir用来存放hadoop运行过程中临时文件的目录,目录指定为/usr/local/hadoop/tmp,如果不设置这个目录 ...
分类:
其他好文 时间:
2019-01-03 20:42:36
阅读次数:
300
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 jdk8 hadoop-3.1.1 伪分布式就一台机器:主节点和从节点都在一个机器上,这里我们使用:node1 192.168230.11 一、平台和软件平台:GNU/L ...
分类:
其他好文 时间:
2019-01-02 12:40:17
阅读次数:
129
安装前准备(centos): 1)设置普通用户以及设置sudo权限 useadd hadoop passwd hadoop --[root]--visudo 2)关闭防火墙 service iptables stop 3)设置主机名称 hostaname hadoop01 (永久化)--vi /et ...
分类:
其他好文 时间:
2018-12-31 17:30:35
阅读次数:
188
1. 安装步骤 Kafka伪分布式安装的思路跟Zookeeper的伪分布式安装思路完全一样,不过比Zookeeper稍微简单些(不需要创建myid文件), 主要是针对每个Kafka服务器配置一个单独的server.properties,三个服务器分别使用server.properties,serve ...
分类:
其他好文 时间:
2018-11-08 10:55:04
阅读次数:
146