安装准备 Spark 集群和 Hadoop 类似,也是采用主从架构,Spark 中的主服务器进程就叫 Master(standalone 模式),从服务器进程叫 Worker Spark 集群规划如下: node-01:Master node-02:Worker node-03:Worker 安装步 ...
分类:
其他好文 时间:
2021-05-24 17:07:05
阅读次数:
0
五一假期回来,使用xshell连不上虚拟机内的MySQL、redis,但是虚拟机还是可以上外网,使用百度没有问题,但这样还是对我的工作产生了一定影响。我一开始以为是电脑的IP改变了,毕竟离开了4天了。但是,根据网上的建议,改了VM的网络适配器为固定IP,还是没有用,就差改虚拟机的IP。后来就不了了之 ...
分类:
其他好文 时间:
2021-05-24 16:51:28
阅读次数:
0
Redis有哪几种数据结构? ● String——字符串String数据结构是简单的key-value类型,value不仅可以是String,也可以是数字(当数字类型用Long可以表示的时候encoding就是整型,其他都存储在sdshdr当做字符串)。 ● Hash——字典在Memcached中, ...
分类:
其他好文 时间:
2021-05-24 16:31:21
阅读次数:
0
环境:Ubuntu16.04 jdk8 doris编译: ## 1. 开启```bashdocker run -d -it \--name doris \--net=host \-v /volume1/doris/incubator-doris:/root/incubator-doris/ apac ...
分类:
其他好文 时间:
2021-05-24 15:57:19
阅读次数:
0
分布式协调服务 Zookeeper是分布式协调服务框架 分布式协调技术: 主要用来解决分布式环境当中多个进程之间的同步控制,让进程有序的去访问某种临界资源,防止造成"脏数据"的后果 分布式协调技术的核心就是实现分布式锁 分布式锁 分布式锁: 为了防止分布式系统中的多个进程之间相互干扰,需要分布式协调 ...
分类:
其他好文 时间:
2021-05-24 14:40:54
阅读次数:
0
Zookeeper概念 Zookeeper是分布式协调服务,用于管理大型主机,在分布式环境中协调和管理服务是很复杂的过程,Zookeeper通过简单的架构和API解决了这个问题 Zookeeper实现分布式锁 分布式锁三要素: 加锁 解锁 锁超时 Zookeeper数据结构类似树结构,由节点Znod ...
分类:
其他好文 时间:
2021-05-24 14:40:06
阅读次数:
0
1:redis缓存在建立的时候一定要建准确,一定要大范围的建,不要只针对一个产品或者一个很小的点进行建设,这样的命中率特别低 2:命名时一定要注意,针对不同的文件最好在命名的时候命名成有针对性的文件,比如A站下B列表的一个功能C,命名时可以如下A:B:C,这样在后续的清除缓存的时候也可以方便清除 3 ...
分类:
其他好文 时间:
2021-05-24 14:01:44
阅读次数:
0
在Service篇里面介绍了像集群外部的客户端公开服务的两种方法,还有另一种方法 创建Ingress资源。 定义Ingress (名词)-进入或进入的行为;进入的权利;进入的手段或地点;入口。 接下来解释为什么需要另一种方式从外部访问Kubernetes服务。 为什么需要Ingress —个重要的原 ...
分类:
Web程序 时间:
2021-05-24 13:57:05
阅读次数:
0
写公钥 ssh-keygen -t rsa # 生成key (echo -e "\n\n"; cat id_rsa.pub; echo -e "\n\n") > /tmp/key.txt # 前后加换行 cat /tmp/key.txt | redis-cli -h 59.xx.xx.157 -x ...
分类:
其他好文 时间:
2021-05-24 13:41:02
阅读次数:
0
Govern Service 基于 Redis 的服务治理平台(服务注册/发现 & 配置中心) Govern Service 是一个轻量级、低成本的服务注册、服务发现、 配置服务 SDK,通过使用现有基础设施中的 Redis (相信你已经部署了Redis),不用给运维部署带来额外的成本与负担。 借助 ...
分类:
其他好文 时间:
2021-05-24 13:28:01
阅读次数:
0