布隆过滤器就是一个初始为0的数组+n个hash函数 上图三个hash函数h1,h2,h3,分别算出x1的三个位置,h1(x1),h2(x1),h3(x1),然后把对应位置(数组的1,4,8)置1,同理算出x2的三个位置(数组的4,6,10)置1 判断是否存在则根据三个hash函数算出3个位置,如果都 ...
分类:
其他好文 时间:
2021-06-28 20:33:44
阅读次数:
0
第二章.HDFS 1.大数据的两个核心技术 2.HDFS设计目标 3.HDFS自身的局限性 4.HDFS采用块设计以及采用块设计的好处 5.HDFS组成架构 6.元数据信息被持久化到磁盘分为哪两个文件 7.第二名称节点的作用 8.名称节点,数据节点的功能 待补充 9.副本机制、数据容错机制、心跳机制 ...
分类:
其他好文 时间:
2021-06-28 20:29:20
阅读次数:
0
说明 这个安装方法可以在macOS,或者Linux里使用 下载 可以直接从官网下载,选择最新的稳定版本就可。 (需要注意的是,网络上很多的redis教程比较陈旧,而且redis好像经常更新的样子,有一些命令可能需要自己去查或者看文档。) 下载到Linux环境的话,可以用命令行,也可以本地下载了之后上 ...
分类:
其他好文 时间:
2021-06-28 20:26:57
阅读次数:
0
redis的初级使用 下载redis的最新版 wget http://download.redis.io/releases/redis-6.0.3.tar.gz 解压并编译 tar -zxvf redis-6.0.3.tar.gz cd redis-6.0.3 make 修改配置文件 bind 12 ...
分类:
其他好文 时间:
2021-06-28 20:26:16
阅读次数:
0
Cluster 管理工具 redis-trib.rb的功能集成到redis-cli,增加了一个backup命令。 除了redis-cli,其实另一个工具的优化就是redis-benchmark。 [root@mini redis6]# ./redis-benchmark --help Usage: ...
分类:
其他好文 时间:
2021-06-28 20:25:14
阅读次数:
0
快照配置 # 注释掉“save”这一行配置项就可以让保存数据库功能失效 # 设置sedis进行数据库镜像的频率。 # 900秒(15分钟)内至少1个key值改变(则进行数据库保存--持久化) # 300秒(5分钟)内至少10个key值改变(则进行数据库保存--持久化) # 60秒(1分钟)内至少10 ...
分类:
其他好文 时间:
2021-06-28 20:22:45
阅读次数:
0
Redis持久化 redis可以将数据写入到磁盘中,在停机或宕机后,再次启动redis时,将磁盘中的备份数据加载到内存中恢复使用。这是redis的持久化。持久化有如下两种机制。 RDB 快照持久化 redis可以将内存中的数据写入磁盘进行持久化。在进行持久化时,redis会创建子进程来执行。 red ...
分类:
其他好文 时间:
2021-06-28 19:51:24
阅读次数:
0
mkdir -p /mydata/redis/conf [root@iZwz9hw4qywrrl4vj6o0j1Z ~]# cd /mydata/redis/conf/ [root@iZwz9hw4qywrrl4vj6o0j1Z conf]# touch redis.conf docker run ...
分类:
其他好文 时间:
2021-06-28 19:50:31
阅读次数:
0
前言 每一次HTTP请求,数据库的事务的执行,我们追踪代码执行的过程中,需要一个唯一值和这些业务操作相关联,对于单机的系统,可以用数据库的自增ID或者时间戳加一个在本机递增值,即可实现唯一值。但在分布式,又该如何实现唯一性的ID 分布式ID的特性 数据库自增的ID Redis分布式ID Zookee ...
分类:
其他好文 时间:
2021-06-28 19:46:13
阅读次数:
0
优化标准:少于1s 接口响应快慢是相对的,比如在200w条数据里查询数据,接口本身就会慢点 可用apifox跑接口,看耗时多少ms 1.代码优化(比如for循环之类的),简化代码 2.慢sql优化(用得少,写的时候就不会用复杂的sql) 3.缓存优化(总之,能查询缓存的话(redis),尽量不要直接 ...
分类:
其他好文 时间:
2021-06-28 19:43:57
阅读次数:
0