1、概念 HBase是一个分布式的NoSQL数据库，其特点高可靠、高性能、面向列、可伸缩。 适合存储大表数据 ，并且可实时读写大表数据。大表：表的规模可以达到数十亿行以及数百万列 表结构稀疏。稀疏：对于为空的列，并不占用存储空间 数据底层存储于Hadoop HDFS分布式文件系统。 利用ZooKee ...
分类：
其他好文 时间：
2021-02-19 13:36:07
阅读次数：
0
单点上传文件 原先来的单点上传文件就是在同一个系统内上传 graph LR A(图片系统) -->B[图片服务器] C(支付系统) -->D[支付服务器] E(后台系统) -->F[后台服务器] 使用FastDFS分布式文件上传 FastDFS:使用C语音编写的一款分布式文件系统,FastDFS充分 ...
分类：
其他好文 时间：
2021-02-03 10:30:31
阅读次数：
0
FastDFS分布式文件存储系统 一、FastDFS是什么 1.1 简介 FastDFS是C语言编写的一个开源的轻量级分布式文件系统，它由淘宝资深架构师余庆编写并开源。FasdDFS专为互联网量身定制，充分考虑到了冗余备份、负载均衡、线程扩容等机制。并注重高可用、高性能等指标，使用FastDFS很容 ...
分类：
其他好文 时间：
2021-01-12 10:45:35
阅读次数：
0
hadoop1.X架构 架构模型 分布式文件系统核心模块: namenode:集群中的主节点,管理元数据(文件的大小,文件的位置,文件的权限)。 secondaryNameNode:辅助namenode管理元数据信息。 dadanode:集群当中的从节点,主要存储集群中的各种数据。 分布式数据计算核 ...
分类：
其他好文 时间：
2020-12-28 11:29:22
阅读次数：
0
一、FastDFS基本概念及基本原理1.什么是FastDFS FastDFS是用C语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。主要功能包括文件存储、文件同步、文件访问（上传、下载）、存取负载均衡、在线扩容、相同内容只存储
分类：
其他好文 时间：
2020-12-10 11:04:10
阅读次数：
3
分布式文件系统FastDFS详解01序FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高
分类：
其他好文 时间：
2020-12-02 11:53:20
阅读次数：
5
1.大数据架构图谱 文件系统 HDFS Hadoop Distributed File System，简称HDFS，是一个分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。 GlusterFS 是一个集群的文件系统 ...
分类：
其他好文 时间：
2020-11-25 12:06:50
阅读次数：
8
服务器数据恢复硬盘配置情况介绍：本次出现数据丢失的服务器是一组Dell服务器，vsan集群，分布式文件系统。一共包含了4个服务器，每台服务器上搭配2组raid磁盘阵列，每个磁盘阵列由6块硬盘组成，上层有虚拟机文件。服务器数据丢失过程介绍：服务器在运行过程中，某一个节点上出现一块硬盘离线，vsan的数据安全机制启动，开始进行数据重构及迁移。在数据进行迁移过程中由于机房断电导致数据重构失败，随后服务器
分类：
其他好文 时间：
2020-11-12 14:04:01
阅读次数：
8
简介Linux持续不断进军可扩展计算空间，特别是可扩展存储空间，Ceph最近加入到Linux中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护POSIX兼容性的同时加入了复制和容错功能Ceph生态系统架构可以划分为四部分：1、Clients：客户端（数据用户）2、cmds：Metadataservercluster，元数据服务器（缓存和同步分布式元数据）3、cosd：Object
分类：
其他好文 时间：
2020-10-22 23:13:23
阅读次数：
52
主 题 ：INTO100沙龙时间 ：2015年11月21日下午地点 ：梦想加联合办公空间分享人：卫向军（毕业于北京邮电大学，现任微博平台架构师，先后在微软、金山云、新浪微博从事技术研发工作，专注于系统架构设计、音视频通讯系统、分布式文件系统和数据挖掘等领域。） 架构以及我理解中架构的本质 在开始谈我 ...
分类：
其他好文 时间：
2020-09-18 03:11:02
阅读次数：
30
