Redis 1.1 缓存策略 1.1.1 策略说明 使用缓存,主要目的为了降低服务器访问物理资源的访问频次.提高了用户获取数据的时间. 注意事项: 缓存中的数据必须和数据库中的数据一致. 1.1.2 缓存设计的思路 缓存中如何保存数据? K-V结构,并且key不能重复. 使用C语言开发. 缓存的运行 ...
分类:
其他好文 时间:
2019-12-10 11:36:54
阅读次数:
123
一、HA高可用集群搭建 版本采用的是 1.1、集群ip规划 1.2、免密登录配置 如上做免密登录,这里只做了neo4j node1 免密登录其他节点 这里做不做免密,都可以,我做免密主要是为了方便,不需要一直输入密码,在正式环境中还是不用免密的好 1.3、修改主机名配置 配置 配置 重启网卡 如上内 ...
分类:
其他好文 时间:
2019-12-09 19:05:32
阅读次数:
431
1 主要步骤 配置网络 修改主机名 关闭防火墙 关闭SELinux 安装jdk 增加hadoop用户 配置ssh信任 配置hadoop 集群部署规划 5台服务器, 一个主节点:nn1.hadoop, master (HA) 一个从节点:nn2.hadoop,slave 三个工作节点: s1.hado ...
分类:
系统相关 时间:
2019-12-09 01:34:10
阅读次数:
243
redis的发布与订阅,主从架构,哨兵架构,cluster集群 下载编译安装redis redis的发布和订阅 redis的持久化 rdb 和 aof RBD模式 AOF模式 redis 持久化方式有哪些?有什么区别? 主从同步 哨兵集群 Redis Sentinel主从复制高可用 redis主从复 ...
分类:
其他好文 时间:
2019-12-08 23:05:46
阅读次数:
122
RocketMQ是阿里开源的分布式消息中间件,跟其它中间件相比,RocketMQ的特点是纯JAVA实现;集群和HA实现相对简单;在发生宕机和其它故障时消息丢失率更低。 一.RocketMQ专业术语 Producer(生产者) 消息生产者,位于用户的进程内,Producer通过NameServer获取 ...
分类:
其他好文 时间:
2019-12-07 23:06:19
阅读次数:
134
MapReduce简介MapReduce是面向大数据并行处理的计算模型、框架和平台,它隐含了以下三层含义: 1)MapReduce是一个基于集群的高性能并行计算平台(Cluster Infrastructure)。它允许用市场上普通的商用服务器构成一个包含数十、数百至数千个节点的分布和并行计算集群。 ...
分类:
其他好文 时间:
2019-12-07 01:25:25
阅读次数:
158
①下载flink-1.7.2-bin-hadoop27-scala_2.11.tgz,解压后进入bin,双击:start-cluster.bat(Windows环境)。 然后打开7777端口: ②进入http://localhost:8081,界面如下: ③ ④ ⑤点击Submit ⑥结果 如下界面 ...
分类:
Web程序 时间:
2019-12-06 19:14:26
阅读次数:
238
spark submit 参数及其调优https://blog.csdn.net/guohecang/article/details/52088117 Spark配置参数详解 一.yarn模式下一个示例:./bin/spark-submit \ --master yarn-cluster \ --n ...
分类:
其他好文 时间:
2019-12-06 16:25:50
阅读次数:
103
https://rook.io/docs/rook/v1.1/ceph examples.html?rook ceph官方指导 https://github.com/rook/rook/tree/master/cluster/examples/kubernetes/ceph?github项目地址 g ...
分类:
其他好文 时间:
2019-12-06 13:51:15
阅读次数:
304
Envoy Proxy 动态API的使用总结 Envoy Proxy和其它L4/L7反向搭理工具最大的区别就是原生支持动态配置。 首先来看一下Envoy的大致架构 从上图可以简单理解:Listener负责接受外部的请求,然后经过Filter/Router处理之后,在转发到具体的Cluster。 其中 ...
分类:
其他好文 时间:
2019-12-06 11:25:15
阅读次数:
132