Spark 运行时相关概念 从集群的物理层面 Master 节点:部署 Cluster Manager的节点 Slave 节点:部署 Worker 的节点,每个节点可以有多个 Worker 进程 从进程层面(与所执行的应用无关) Cluster Manager:管理集群的 CPU、内存等资源,为不同 ...
分类:
其他好文 时间:
2021-03-03 12:14:39
阅读次数:
0
为什么用Zookeeper 官方地址:https://zookeeper.apache.org/doc/current/zookeeperOver.html redis不能保证实时一致性和强一致性(最终一致性) ZooKeeper实施对高性能,高可用性,严格排序的访问给予了高度重视 ZooKeepe ...
分类:
其他好文 时间:
2021-03-03 11:54:16
阅读次数:
0
这是你没见过的不一样的redis 提到Redis,大家一定会想到的几个点是什么呢?高并发,KV存储,内存数据库,丰富的数据结构,单线程(6版本之前)那么,接下来,上面提到的这些,都会一一给大家解答,带大家领略一下Redis的魅力,文章会比较长,部分废话,请大家跳过,谢谢!~欢迎进群973961276 ...
分类:
其他好文 时间:
2021-03-02 12:17:02
阅读次数:
0
关于Redis说点什么,目前都是使用Redis作为数据缓存,缓存的目标主要是那些需要经常访问的数据,或计算复杂而耗时的数据。缓存的效果就是减少了数据库读的次数,减少了复杂数据的计算次数,从而提高了服务器的性能。 一、redis持久化 两种方式 1、redis提供了两种持久化的方式,分别是RDB(Re ...
分类:
数据库 时间:
2021-03-02 12:16:13
阅读次数:
0
从类型上来说,mysql是关系型数据库,redis是缓存数据库。 mysql用于持久化的存储数据到硬盘,功能强大,但是速度较慢。 redis用于存储使用较为频繁的数据到缓存中,读取速度快,能够大大的提高运行效率,但是保存时间有限。 mysql和redis因为需求的不同,一般都是配合使用。 描述的具体 ...
分类:
数据库 时间:
2021-03-02 12:15:10
阅读次数:
0
一、使用redis缓存准测 1. 经常存取,且不会改变的数据可以用缓存来存储,比如首页数据,数据量虽然大,但它不会经常改变;2. 经常使用(这里的经常使用的意思是经常作dml操作),但数据量小,比如说购物车数量的改变,就可以使用缓存; 二、python中使用redis 安装:pip install ...
分类:
编程语言 时间:
2021-03-02 12:14:34
阅读次数:
0
1.安装Redis 因为使用了Redis储存登陆用户信息,所以需要先安装Redis 下载链接 : https://github.com/tporadowski/redis/releases 下载后启动文件夹中的redis-server.exe即可 2.启动前端项目 教程: https://www.c ...
分类:
其他好文 时间:
2021-03-01 14:16:03
阅读次数:
0
使用批处理脚本在win10系统启动Redis 5.0.10,免去每次进入安装目录才可以启动Redis的麻烦。 ...
四、分布式锁 传统的锁可解决在一台服务器上多个线程之间的并发冲突,但有些场景下多台服务器需要进行同一操作,这时为了协调多台服务器就需要分布式锁(由第三方提供锁)。分布式锁常用的是两种实现方式:使用Redis或Zookeeper。 4.1Redis自带的原语 Redis是一个key value数据库, ...
分类:
其他好文 时间:
2021-03-01 13:19:18
阅读次数:
0
#拉取image docker pull redis 配置redis.conf配置文件redis.conf文件存放在成都号1803百度网盘 docker 目录 修改redis.conf配置文件,主要配置的如下: bind 127.0.0.1 #注释掉这部分,使redis可以外部访问 daemoniz ...
分类:
其他好文 时间:
2021-03-01 13:12:31
阅读次数:
0