学习过得技术 HDFS YARN MR HIVE HBASE SPARK SPARK(sparkCore、sparkSql、sparkStreaming) HDFS 数据库管理、 存磁盘 Ha模式(在zookeeper之上) 联邦机制(把大象装进冰箱) split切片 Hbase 列式数据库 半结构 ...
分类:
其他好文 时间:
2021-04-05 12:37:34
阅读次数:
0
1. 四种数据库的比较 数据库描述 Greenplum 开源大规模并行数据分析引擎。借助MPP架构,在大型数据集上执行复杂SQL分析的速度比很多解决方案都要快。应用广泛。 Teradata 大型数据仓库系统,产品成熟,价格昂贵。用于证券系统。 Presto 分布式SQL查询引擎, 专门进行高速、实时 ...
分类:
数据库 时间:
2021-04-05 12:00:18
阅读次数:
0
k8s全称kubernetes,这个名字大家应该都不陌生,他的魅力是要您去投入生产环境才能感受得到,越来越多公司正在拥抱K8S并主导了很多业务。 由于很多公司开始数字化转型,慢慢的很多业务都往微服务架构发展,这使得自己的集群会变得越来越庞大,业务节点的数量也相继增多,如何高效管理K8S集群是很多公司 ...
分类:
其他好文 时间:
2021-04-05 11:48:00
阅读次数:
0
Springmvc的REST风格 REST概念 REST即表述性状态传递(英文:Representational State Transfer,简称REST)是Roy Fielding博士在2000年他的博士论文中提出来的一种软件架构风格。 它是一种针对网络应用的设计和开发方式,可以降低开发的复杂性 ...
分类:
编程语言 时间:
2021-04-02 13:24:12
阅读次数:
0
分布式异步对象存储 DAOS 是一个开源的对象存储系统,专为大规模分布式非易失性内存设计,利用了 SCM 和 NVMe 等的下一代 NVM 技术。 DAOS 同时在硬件之上提供了键值存储接口,提供了诸如事务性非阻塞 I/O、具有自我修复的高级数据保护、端到端数据完整性、细粒度数据控制和弹性存储的高级... ...
分类:
其他好文 时间:
2021-04-02 13:21:51
阅读次数:
0
1、前言 有点小激动,今天好像发现了新大陆。不知道讲的对不对,姑且记录一波,有不对的地方大家请指正。 在FPGA中,流水线技术就是向组合逻辑中插入寄存器,提升系统的时钟频率。 2、实际电路中的流水线 参考:FPGA流水线的详细解析 参考:流水线技术 参考:系统架构之流水线技术 在一个简单的例子中,如 ...
分类:
其他好文 时间:
2021-04-02 12:59:33
阅读次数:
0
为了完成不同计算机或网络或架构之间的成功通信,国际标准化组织(ISO,1984)提出了OSI七层模型。 OSI(Open System Interconnect),即开放式系统互联。OSI网络模型分为七层:应用层,表示层,会话层,传输层,网络层,数据链路层,物理层。 应用层 应用层由网络应用程序使用 ...
分类:
其他好文 时间:
2021-04-01 13:48:59
阅读次数:
0
1. Ceph架构简介及使用场景介绍 1.1 Ceph简介 Ceph是一个统一的分布式存储系统,设计初衷是提供较好的性能、可靠性和可扩展性。 Ceph项目最早起源于Sage就读博士期间的工作(最早的成果于2004年发表),并随后贡献给开源社区。在经过了数年的发展之后,目前已得到众多云计算厂商的支持并 ...
分类:
其他好文 时间:
2021-04-01 13:35:25
阅读次数:
0
[云计算]OpenStack - Nova组件(未完善) Nova系统架构 架构 模块 模块 功能 一般部署位置 nova-api 接受rest消息 控制节点 nova-scheduler 选择合适的主机 控制节点 nova-conductor 数据库操作、复杂流程控制 控制节点 nova-comp ...
分类:
其他好文 时间:
2021-04-01 13:18:52
阅读次数:
0
前言 本文主要介绍ElasticSearch冷热分离架构以及实现。 冷热分离架构介绍 冷热分离是目前ES非常火的一个架构,它充分的利用的集群机器的优劣来实现资源的调度分配。ES集群的索引写入及查询速度主要依赖于磁盘的IO速度,冷热数据分离的关键点为使用固态磁盘存储数据。若全部使用固态,成本过高,且存 ...
分类:
其他好文 时间:
2021-03-31 12:30:47
阅读次数:
0