在搭好HA集群之后，想测试一下集群的高可用性，于是先把active的namenode给停掉： hadoop-daemon.sh stop namenode 或者直接kill掉该节点namenode的对应进程也可。 但是通过hdfs haadmin -getServiceState master1 查 ...
分类：
其他好文 时间：
2020-02-28 18:52:26
阅读次数：
101
下载Spark安装包 从官网下载 http://spark.apache.org/downloads.html 从微软的镜像站下载 http://mirrors.hust.edu.cn/apache/ 从清华的镜像站下载 https://mirrors.tuna.tsinghua.edu.cn/ap ...
分类：
其他好文 时间：
2020-01-26 18:59:28
阅读次数：
71
一、基础环境 1.虚拟机 VMware 15.0 2.CentOS 6.5 Linux 系统 二、MapReduce的原理分析 三、Yarn集群搭建 1.准备好三台虚拟机（这里我直接拷贝了Ha集群中一个作为主机，其余克隆） 2.修改基础配置： 1.删除每一台机器的Mac地址（CentOS 7 以上不 ...
分类：
其他好文 时间：
2019-12-30 23:15:14
阅读次数：
116
1、hadoop-env.sh配置，2、hdfs-site.xml配置文件，3、core-site.xml配置文件，4、mapred-site.xml配置，5、yarn-site.xml配置，6、slaves配置（DataNode）
分类：
其他好文 时间：
2019-11-09 23:32:30
阅读次数：
135
Sealos安装Kubernetesv1.16.0HA集群github项目链接https://github.com/fanux/sealos初始化master节点与worker节点初始化脚本init.sh#!/bin/bash#在master节点和worker节点都要执行#安装docker#参考文档如下#https://docs.docker.com/install/linux/docker-ce
分类：
Web程序 时间：
2019-11-09 00:41:42
阅读次数：
312
一、环境准备1.集群规划主机名IP角色VIP20.0.20.200master-VIPk8s-master0120.0.20.201masterk8s-master0220.0.20.202masterk8s-master0320.0.20.203masterk8s-node0120.0.20.204nodek8s-node0220.0.20.205nodek8s-node0320.0.20.20
分类：
其他好文 时间：
2019-09-10 09:15:32
阅读次数：
125
一、先决条件(所有主机执行) 1.1 基础设置 1、安装基础软件 2、防火墙 3、时间同步 4、内核参数 5、加载模块 6、挂载数据盘 挂载阿里云数据盘 7、安装docker #更改docker存储路径 #调整参数 1.2 下载CLI工具 Rancher依靠私有镜像仓库进行离线安装，必须拥有自己的私 ...
分类：
其他好文 时间：
2019-06-19 18:32:08
阅读次数：
127
kubernetes v1.14.3 HA集群安装
分类：
Web程序 时间：
2019-06-13 10:35:05
阅读次数：
223
简介： 最近在看hadoop的一些知识，下面搭建一个ha (高可用)的hadoop完整分布式集群： 搭建步骤： 1> 关闭防火墙，禁止设置开机启动： (1) //临时关闭 systemctl stop firewalld (2) //禁止开机启动 systemctl disable firewall ...
分类：
其他好文 时间：
2019-05-29 10:40:37
阅读次数：
120
一、下载Spark安装包 1、从官网下载 http://spark.apache.org/downloads.html 2、从微软的镜像站下载 http://mirrors.hust.edu.cn/apache/ 3、从清华的镜像站下载 https://mirrors.tuna.tsinghua.e ...
分类：
其他好文 时间：
2019-05-07 21:36:24
阅读次数：
192
