0. 基本情况 Redis采用集群模式，560个主节点，主从比为1:1，单台机器上为16个节点。info memory观察到主节点A单个Redis内存used_memory_rss_human为9.2G（设置的maxmemory_human为6G）超过最大值设置。 1.查看客户端连接情况 [root ...
分类：
其他好文 时间：
2018-10-09 20:06:14
阅读次数：
309
我用的是linux，CentOS7.3，zookeeper的版本是3.4.6，工具XShell。上传zookeeper的压缩包后我们开始操作。 集群模式： 1、解压zookeeper，路径随意 tar -zxvf zookeeper.tar.gz 2、配置文件 初次使用zookeeper时，将con ...
分类：
其他好文 时间：
2018-09-14 19:53:12
阅读次数：
136
配置机器1 在演示中，172.16.179.130为当前ubuntu机器的ip 在172.16.179.130上进?Desktop?录，创建conf?录 在conf?录下创建?件7000.conf，编辑内容如下 port 7000 bind 172.16.179.130 daemonize yes ...
分类：
系统相关 时间：
2018-09-02 01:50:16
阅读次数：
266
对于并发请求很高的生产环境，单个Redis满足不了性能要求，通常都会配置Redis集群来提高服务性能。3.0之后的Redis支持了集群模式。 Redis官方提供的集群功能是无中心的，命令请求可以发送到任意一个Redis节点，如果该请求的key不是由该节点负责处理，则会返回给客户端MOVED错误，提示 ...
分类：
其他好文 时间：
2018-08-31 10:51:57
阅读次数：
150
Redis安装（基于2.8版本） 哨兵（Sentinel集群）模式： 集群（基于3.0+） ...
分类：
其他好文 时间：
2018-08-29 10:49:54
阅读次数：
231
## 04、Spark Standalone集群搭建 ### 4.1 集群概述 独立模式是Spark集群模式之一，需要在多台节点上安装spark软件包，并分别启动master节点和worker节点。master节点是管理节点，负责和各worker节点通信，完成worker的注册与注销。worker节... ...
分类：
其他好文 时间：
2018-08-27 21:39:30
阅读次数：
125
spark支持的运行模式：本地模式、本地集群模式、standalone模式、yarn模式及mesos模式。
分类：
其他好文 时间：
2018-08-26 01:21:58
阅读次数：
142
Processors 表示对于一种数据操作处理，在pipeline中可以应用多个Processors， 同时根据不同的执行模式，可以分为独立模式的，集群模式、边缘模式（agent），以及 帮助测试的测试Processors 独立pipelineonly Record Deduplicator - R ...
分类：
其他好文 时间：
2018-08-21 10:55:57
阅读次数：
1010
共享存储在需要将一个 LUN （逻辑单元号）映射给多个节点、为集群提供一个共享的存储卷时，同一个存储 LUN 在各个主机端的 LUNID 必须是相同的。比如： (一) 在为多个 ESX 节点创建一个 VMFS 卷的时候(二) 在双机 HA 集群创建共享存储的时候时间一致性集群模式下，各个节点要协同工... ...
分类：
其他好文 时间：
2018-08-20 15:33:37
阅读次数：
175
Spark 编程指南 概述 Spark 依赖 初始化 Spark 使用 Shell 弹性分布式数据集 (RDDs) 并行集合 外部 Datasets（数据集） RDD 操作 基础 传递 Functions（函数）给 Spark 理解闭包 示例 Local（本地）vs. cluster（集群）模式 打 ...
分类：
其他好文 时间：
2018-08-19 13:55:40
阅读次数：
209
