1、准备工作 1.1 给虚拟机取个 hostname。 而且配置 hosts。如果要和win做联合开发的话,和win的hosts文件,做一样的域名映射。 # 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdo ...
分类:
系统相关 时间:
2020-01-27 22:00:19
阅读次数:
106
JDK的安装 JDK使用root用户安装 上传安装包并解压 配置环境变量 验证Java版本 配置配置ssh localhost 检测 正常情况下,本机通过ssh连接自己也是需要输入密码的 生成私钥和公钥秘钥对 将公钥添加到authorized_keys 赋予authorized_keys文件600的 ...
分类:
其他好文 时间:
2020-01-26 19:25:35
阅读次数:
94
基于VMware 15+CentOS 7+Hadoop 2.6,各种考虑和条件都是基于我个人的现状和操作习惯,主要用于个人学习。个人理解,水平有限。 hadoop搭建一:虚拟机网络配置和基础 hadoop搭建二:hadoop全分布搭建 hadoop搭建三:hadoop伪分布搭建 hadoop搭建四: ...
分类:
其他好文 时间:
2020-01-19 17:42:17
阅读次数:
141
1、下载Kafka http://mirrors.hust.edu.cn/apache/kafka/2.1.1/ 2、定位到/usr/local,创建kafka文件夹,进入此文件夹后解压kafka(可自行选择安装目录) tar -xzf kafka_2.11-2.1.1.tgz 3、运行内置zook ...
分类:
其他好文 时间:
2020-01-10 15:33:08
阅读次数:
106
HBase是大数据中的数据库,是一种列级存储的数据库,支持秒级查询,下面安装记录一下,基于centos6,后面查看用。 安装hadoop hbase存储的数据在hadoop中,因此需要先安装hadoop,可以安装伪分布式就可以,用作学习用,参考 https://www.cnblogs.com/you ...
分类:
其他好文 时间:
2020-01-02 00:04:07
阅读次数:
121
###kafka伪分布式的安装 注意:kafka_2.11-0.10.0.1.tgz 2.11表示scala版本,0.10.0.1才是kafka版本 ##环境 192.168.50.246 node01 192.168.50.247 node02 192.168.50.248 node03 [roo... ...
分类:
其他好文 时间:
2019-12-31 14:07:29
阅读次数:
97
1.准备一台Vmware虚拟机,添加hdfs用户及用户组,配置网络见 https://www.cnblogs.com/qixing/p/11396835.html 在root用户下 添加hdfs用户,并设置密码: 将hdfs用户添加到hdfs用户组中 前面一个hdfs是组名,后面一个hdfs是用户名 ...
分类:
其他好文 时间:
2019-12-29 23:50:10
阅读次数:
271
hadoop所有的配置文件都是在 etc/hadoop下 (1)配置集群 第一步:在hadoop下修改core-site.xml文件 vim etc/hadoop/core-site.xml <configuration> <!-- 指定HDFS中Name Node的地址--> <property> ...
分类:
其他好文 时间:
2019-12-11 13:06:14
阅读次数:
104
Centos6下安装伪分布式hadoop集群,选取的hadoop版本是apache下的hadoop2.7.1,在一台linux服务器上安装hadoop后,同时拥有namenode,datanode和secondarynamenode等节点的功能,下面简单安装下。 前置准备 主要涉及防火墙关闭、jdk ...
分类:
其他好文 时间:
2019-12-06 00:03:53
阅读次数:
99
第一步:配置网络(静态IP) vi /etc/sysconfig/network-scripts/ifcfg-ens33(网卡名称可能不同) 1. 修改: 将该配置文件中的ONBOOT=no修改为yes(网络开机自启) 将BOOTPROTO=dhcp修改为static(将ip设置为静态ip) 2. ...
分类:
其他好文 时间:
2019-12-02 20:42:53
阅读次数:
124