Hadoop有三种模式：本地模式、伪分布模式、集群模式 1、本地模式 1、在/opt下面创建一个software文件 2、将文件hadoop-2.6.5.tar.gz拷贝到 /opt/software下面 3、在usr下创建hadoop把hadoop-2.6.5.tar.gz 复制到 /usr/ha ...
分类：
其他好文 时间：
2020-04-02 11:42:47
阅读次数：
75
前面我们已经安装了flink，与storm一样，flink也有两种模式，一是本地模式，主要用于学习和测试，另一个是集群模式，实际生产中使用这种模式。本节将阐述如何使用本地模式的flink进行词频统计。 1 系统、软件以及前提约束 CentOS 7 64 工作站 作者的机子ip是192.168.100 ...
分类：
其他好文 时间：
2020-03-30 00:09:57
阅读次数：
64
Redis我们一般是用作缓存，扛并发；或者用于某些特定的业务场景，比如前面说到redis各种数据类型的使用场景以及redis的哨兵和集群模式。 这里主要整理了下redis用作缓存，存在的一些问题，以及改善方案。 简单的流程就像这个样子，一般请先到缓存区获取，如果缓存没有再到后端的数据库去查询。 1. ...
分类：
其他好文 时间：
2020-03-29 01:06:34
阅读次数：
61
一、redis 和 memcached 有啥区别？ 1. redis 支持复杂的数据结构 redis 相比 memcached 来说，拥有更多的数据结构，能支持更丰富的数据操作。如果需要缓存能够支持更复杂的结构和操作， redis 会是不错的选择。 2. redis 原生支持集群模式 在 redis ...
分类：
编程语言 时间：
2020-03-25 21:40:01
阅读次数：
77
一、概念 Zookeeper 是 一个典型的分布式数据一致性的解决方案. 1、zookeeper有两种运行模式： 集群模式和单机模式,还有一种伪集群模式,在单机模式下模拟集群的zookeeper服务 2、Zookeeper的典型应用场景: 数据发布/订阅 负载均衡 命名服务 分布式协调/通知 集群管 ...
分类：
其他好文 时间：
2020-03-22 22:32:13
阅读次数：
84
一、Consumer 介绍 1.1 核心参数 二、消费模式 2.1 集群模式 2.2 广播模式 三、Offset 介绍 3.1 Offset 是什么 3.2 Offset 类结构 从类结构可以看出 Offset 分为本地文件类型和远程文件类型。 3.2 消费模式采用的 Offset 类型 3.3 O ...
分类：
其他好文 时间：
2020-03-22 13:48:55
阅读次数：
128
Spring Cloud Alibaba/开始写Spring Cloud项目 ...
分类：
编程语言 时间：
2020-03-21 20:54:12
阅读次数：
508
一、集群节点 1、节点 一个节点就是一个运行在集群模式下的Redis服务器，Redis服务器在启动时会根据cluster-enabled配置选项是否为yes来决定是否开启服务器的集群模式。 运行在集群模式下的 Redis 服务器会继续使用所有在单机模式中使用的服务器组件： 节点会继续使用文件事件处理 ...
分类：
其他好文 时间：
2020-03-18 10:01:10
阅读次数：
55
scp 用于两台Linux主机之间的通信安装 yum -y install openssh-clients 命令格式： scp file 远程用户名@远程服务器ip:-/ (注意：冒号和目录之间不能有空格，如果拷贝目录需要加-r) scp /etc/profile root@node2:/etc 文 ...
分类：
其他好文 时间：
2020-03-04 16:20:56
阅读次数：
69
Redis的高可用方式及常用集群方式一般有: 1. 主从模式 2. 哨兵模式 3. 集群模式 当然也有第三方代理模式，如codis等，这种不在这里讨论之列。 我刚好学习到这里，我就简单记录下这几种模式的配置 。老鸟及不感兴趣的，可以就此飘过。 Redis的安装及单实例的启动，这里就不再赘述了，确实比 ...
分类：
其他好文 时间：
2020-03-04 09:15:32
阅读次数：
65
