引言 NoSql:主要指非关系型、分布式、不提供ACID的数据库设计模式。 1 ES总结 主旨在于随时可用和按需扩容,通过购买性能更强大(垂直扩容、或纵向扩容)或者数量更多的服务器(水平扩容、或横向扩容)来实现。 垂直扩容有限,真正的扩容能力来自于水平扩容(为集群增加更多的节点,将负载压力和稳定性分 ...
分类:
其他好文 时间:
2021-03-15 10:34:48
阅读次数:
0
1. 阐述Hadoop生态系统中,HDFS, MapReduce, Yarn, Hbase及Spark的相互关系,为什么要引入Yarn和Spark。 答: Hadoop对应于Google三驾马车:HDFS对应于GFS,即分布式文件系统,MapReduce即并行计算框架,HBase对应于BigTabl ...
分类:
其他好文 时间:
2021-03-15 10:30:53
阅读次数:
0
1. 阐述Hadoop生态系统中,HDFS, MapReduce, Yarn, Hbase及Spark的相互关系,为什么要引入Yarn和Spark。 Hadoop是一个能够对大量数据进行分布式处理的软件框架。具有可靠、高效、可伸缩的特点。 Hadoop的核心是HDFS和MapReduce,hadoo ...
分类:
其他好文 时间:
2021-03-15 10:30:41
阅读次数:
0
昨晚睡觉前,顺手撸了几个群聊的聊天记录。发现一个很有意思的名词“分布式单体”,顺藤摸瓜看了一下之前的聊天记录,由于内容骂骂咧咧,我就不贴出来了。。。大致内容就是某公司在做微服务改造,但改的不伦不类,形式上像微服务,而本质上依然是单体,甚至连单体都不如。 这样的改造现象,其实在国内还是蛮多见的。下面就 ...
分类:
其他好文 时间:
2021-03-12 14:25:24
阅读次数:
0
IPFS作为一项分布式存储技术,可以说是web3.0发展的基石。关于IPFS的产业,如存储、技术、矿机、矿池等也发展得非常迅速。 什么是单机挖矿? 单机挖矿就是一台机器就是一个节点,一台机器就完成挖矿的整个过程,即封装、打包和爆块。能够爆块成功的节点获得的奖励是一样的,约为23.8个FIL。 什么是 ...
分类:
其他好文 时间:
2021-03-11 13:09:35
阅读次数:
0
概述 Redis 是速度非常快的 非关系型(NoSQL) 内存 键值 数据库。 Redis 支持很多特性:例如数据持久化,使用复制来扩展读性能,使用分片来扩展写性能,Redis Cluster 实现了分布式的支持。 内存管理机制:在 Redis 中,并不是所有数据都一直存储在内存中,可以将一些很久没 ...
分类:
其他好文 时间:
2021-03-09 13:20:08
阅读次数:
0
前言 日常开发中,秒杀下单、抢红包等等业务场景,都需要用到分布式锁。而Redis非常适合作为分布式锁使用。本文将分七个方案展开,跟大家探讨Redis分布式锁的正确使用方式。如果有不正确的地方,欢迎大家指出哈,一起学习一起进步。 公众号:捡田螺的小男孩 什么是分布式锁 方案一:SETNX + EXPI ...
分类:
其他好文 时间:
2021-03-09 13:12:05
阅读次数:
0
一致性hash算法 一致性哈希:就是普通取模哈希算法的改良版,哈希函数计算方法不变,只不过是通过构建环状的 Hash 空间代替普通的线性 Hash 空间。 一致性Hash性质 考虑到分布式系统每个节点都有可能失效,并且新的节点很可能动态的增加进来,如何保证当系统的节点数目发生变化时仍然能够对外提供良 ...
分类:
编程语言 时间:
2021-03-09 12:58:37
阅读次数:
0
一:把github上的项目克隆到本地,修改后推送到GitHub上 1、下载git、安装git:https://git-scm.com/download 2、cmd中输入:Git --version 查看git 版本 3、因为Git 是分布式版本控制系统,所以需要填写用户名和邮箱作为一个标识。 4、打 ...
分类:
其他好文 时间:
2021-03-08 13:59:40
阅读次数:
0
雪花算法解决的问题: 全局唯一,聚集索引,递增趋势,高可用高性能,信息安全; GUID 不能满足上面需求; 雪花算法设计思路:64位,可满足分布式环境下唯一性,递增性,聚集索引,信息安全(从id上不能看到订单的信息) 根据区域划分的ID :如Aid:1 10亿Bid:10亿--20亿Cid:20亿- ...
分类:
编程语言 时间:
2021-03-08 13:52:13
阅读次数:
0