部署安装 1.GlusterFS 安装前的准备 电脑一台,内存>=4G,可用磁盘空间大于50G安装VMWARE Workstation虚拟机软件安装好四台CentOS-6-x86_64(6.2-6.8都可以)的虚拟机基本系统:1核CPU+1024M内存+10G硬盘网络选择:网络地址转换(NAT)关闭 ...
分类:
其他好文 时间:
2021-07-02 15:43:55
阅读次数:
0
HDFS 概述 HDFS的产生背景和定义 HDFS产生背景 解决海量数据的存储问题 需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统。HDFS 只是分布式文件管理系统中的一种。 HDFS定义 HDFS(Hadoop Distributed File System),它是一个文件系统,用于 ...
分类:
其他好文 时间:
2021-06-30 17:40:30
阅读次数:
0
作者| QingStor 黄蒙 我们为什么需要 “网络文件协议” 存储文件是大家日常工作生活中最常见的需求,随着文件数量和占用存储空间的上升,以及在一定范围内共享访问文件的需求产生,我们自然需要把存储文件的工作从单个计算机设备中剥离出来,作为一个单独的服务资源(或物理硬件)来对外提供存储功能,提供更 ...
分类:
其他好文 时间:
2021-06-25 16:47:12
阅读次数:
0
https://github.com/lishen2020/miniohttps://www.cnblogs.com/lishen2021/p/14681182.htmlhttps://www.cnblogs.com/zimug/archive/2020/08/06/13444086.htmlhtt ...
分类:
其他好文 时间:
2021-04-22 15:32:50
阅读次数:
0
FastDFS 1.fastdfs基本概念 FastDFS是分布式文件系统。使用 FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 2.工作原理 fastdfs架构包括Tracker(跟踪)server 客户端请求 Tracker server 进行文件上传、下载,通过 ...
分类:
其他好文 时间:
2021-04-07 11:43:28
阅读次数:
0
一、什么是消息队列? 消息队列不知道大家看到这个词的时候,会不会觉得它是一个比较高端的技术,反正我是觉得它好像是挺牛逼的。 消息队列,一般我们会简称它为MQ(Message Queue),嗯,就是很直白的简写。 我们先不管消息(Message)这个词,来看看队列(Queue)。这一看,队列大家应该都 ...
分类:
其他好文 时间:
2021-04-02 13:09:28
阅读次数:
0
FastDFS分布式文件存储系统 FastDFS FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制, 充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用 FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等 ...
分类:
其他好文 时间:
2021-04-01 13:28:17
阅读次数:
0
MongoDB是一个基于分布式 文件存储的NoSQL数据库,适合存储JSON风格文件的形式。 三元素:数据库、集合和文档。 文档:对应着关系数据库中的行,就是一个对象,由键值对构成,是json的扩展Bson形式,示例 {'name':'guojing','gender':'男'} 集合:类似于关系数 ...
分类:
数据库 时间:
2021-03-31 12:29:59
阅读次数:
0
1. 阐述Hadoop生态系统中,HDFS, MapReduce, Yarn, Hbase及Spark的相互关系。 Hadoop对应于Google三驾马车:HDFS对应于GFS,即分布式文件系统,MapReduce即并行计算框架,HBase对应于BigTable,即分布式NoSQL列数据库,外加Zo ...
分类:
其他好文 时间:
2021-03-15 10:45:14
阅读次数:
0
1. 阐述Hadoop生态系统中,HDFS, MapReduce, Yarn, Hbase及Spark的相互关系,为什么要引入Yarn和Spark。 答: Hadoop对应于Google三驾马车:HDFS对应于GFS,即分布式文件系统,MapReduce即并行计算框架,HBase对应于BigTabl ...
分类:
其他好文 时间:
2021-03-15 10:30:53
阅读次数:
0