HA工作机制 （配置HA高可用传送门：https://www.cnblogs.com/zhqin/p/11904317.html） HA：高可用（7 24小时不中断服务） 主要的HA是针对集群的master节点的，即namenode和resourcemanager，毕竟DataNode挂掉之后影响 ...
分类：
其他好文 时间：
2019-11-21 16:59:14
阅读次数：
122
一、 heartbeat的概念Linux-HA的全称是High-Availability Linux，它是一个开源项目，这个开源项目的目标是：通过社区开发者的共同努力，提供一个增强linux可靠性（reliability）、可用性 （availability）和可服务性（serviceability ...
分类：
其他好文 时间：
2019-11-21 15:29:35
阅读次数：
108
第七章· Redis Cluster 核心技术 阅读目录(Content) 一、Redis Cluster 分布式集群 1.什么是Redis Cluster 2.Redis Cluster的特点 3.Redis Cluster客户端连接任意节点 4.redis集群数据共享(设计理念) 5.Redis ...
分类：
其他好文 时间：
2019-11-21 14:07:09
阅读次数：
119
1、在/opt下创建ha文件夹 sudo mkdir ha 2、更改ha文件夹所有者 sudo chown atguigu:atguigu ha 3、将之前配置安装的hadoop文件夹拷贝到刚创建的ha文件夹下 cp r module/hadoop 2.7.2/ ha/ 4、然后进入到刚拷贝过去的h ...
分类：
其他好文 时间：
2019-11-21 12:30:07
阅读次数：
96
HA工作机制 HA：高可用（7 24小时不中断服务） 主要的HA是针对集群的master节点的，即namenode和resourcemanager，毕竟DataNode挂掉之后影响 不是特别大，重启就好了。 HDFS的HA HDFS HA功能通过配置Active/Standby两个NameNodes ...
分类：
其他好文 时间：
2019-11-21 11:42:34
阅读次数：
151
写在前面的话 上一节的复制集也就是主从能够解决我们高可用和数据安全性问题，但是无法解决我们的性能瓶颈问题。所以针对性能瓶颈，我们需要采用分布式架构，也就是分片集群，sharding cluster！ 架构说明 架构规划： 我们这里准备了 4 台虚拟机：192.168.200.101-104 在分片集 ...
分类：
数据库 时间：
2019-11-20 13:02:52
阅读次数：
82
一、安装Redis集群 安装步骤参照网上教程，Mac安装步骤参照https://github.com/muyl/mac docker redis cluster 二、创建SpringBoot工程 1. 创建Redis配置类 2. SpringBoot属性文件 3. SpringBoot启动类 4. ...
分类：
其他好文 时间：
2019-11-19 01:13:10
阅读次数：
69
上一篇说到Spark的yarn client运行模式，它与yarn cluster模式的主要区别就是前者Driver是运行在客户端，后者Driver是运行在yarn集群中。yarn client模式一般用在交互式场景中，比如spark shell, spark sql等程序，但是该模式下运行在客户端 ...
分类：
其他好文 时间：
2019-11-18 22:14:29
阅读次数：
101
这里提供一个转置矩阵的perl脚本，R语言中的t()函数同样也能实现转置 1 use strict; 2 3 open A,"$ARGV[0]"; 4 5 my %ha; 6 my $head=<A>; 7 chomp($head); 8 my @tag=split /\s+/,$head; 9 1 ...
分类：
其他好文 时间：
2019-11-18 18:40:50
阅读次数：
160
1. 切换到root工作环境，因为一下操作必须拥有root权限 [ha@localhost ~]$ su root密码： 2. 编辑/etc/pam.d/gdm [root@localhost ha]# vi /etc/pam.d/gdm 注释掉下面这行 auth required pam_succ ...
分类：
其他好文 时间：
2019-11-16 19:41:24
阅读次数：
108
