点评一下先：kafka的存储主要有几个特点： 1. 多级索引（名义上是1级索引，但是这级索引依赖了文件列表，相当于文件列表是第一级索引，所以是二级索引），二级索引文件和数据文件一一对应。 相比只有1级索引，这样可以支持更大的数据量，也可以更好的支持删除。如果我来设计这个存储系统，我会这样设计： 第一 ...
分类：
其他好文 时间：
2017-06-27 16:22:23
阅读次数：
237
简单介绍：FastDFS作者余庆，是一套开源的分布式文件系统。功能：文件存储、同步、上传、下载，提供负载均衡功能，适合用于图片、视频的存放。角色：tracker作用：任务调度接受客户端的访问，检索存储节点，为客户端提供一台可用的storage。storage作用：接受Tracker的调度，响..
分类：
其他好文 时间：
2017-06-27 13:53:02
阅读次数：
272
怎么为用户配置漫游文件在企业中，用户通过客户端访问服务器上的资源,既提高了网络安全性，又方便了管理员对大型网络中计算机的集中管理和控制。将用户的配置文件存储在服务器的共享文件夹内,实现用户配置文件的漫游,从而使配置文件跟随着用户,用户无论登录域中哪一台计算机都..
分类：
其他好文 时间：
2017-06-26 22:37:00
阅读次数：
137
HDFS数据块(block) 文件被切分成固定大小的数据块 > √默认数据块大小为64MB，可配 √若文件大小不到64MB，则单存成一个block 为何数据块如此之大 > √数据传输时间超过寻道时间（高吞吐率） 一个文件存储方式 > √按大小被切分成若干个block，存储到不同的节点上 √默认情况下 ...
分类：
其他好文 时间：
2017-06-24 22:42:27
阅读次数：
170
SequenceFile文件是Hadoop用来存储二进制形式的key-value对而设计的一种平面文件(Flat File)。目前，也有不少人在该文件的基础之上提出了一些HDFS中小文件存储的解决方案，他们的基本思路就是将小文件进行合并成一个大文件，同时对这些小文件的位置信息构建索引。不过，这类解决 ...
分类：
其他好文 时间：
2017-06-24 09:56:53
阅读次数：
198
fastdfs 简介FastDFS是一个国产开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。FastDFS服务端有两个角色：跟踪器（tracker ...
分类：
其他好文 时间：
2017-06-23 18:21:11
阅读次数：
2782
分布式文件存储的数据库 能够快速识别数据库内大数据集中的热数据，提供一致的性能改进。 其主要场景如下：网站实时数据处理。它非常适合实时的插入、更新与查询，并具备网站实时数据存储所需的复制及高度伸缩性。2）缓存。由于性能很高，它适合作为信息基础设施的缓存层。在系统重启之后，由它搭建的持久化缓存层可以避 ...
分类：
数据库 时间：
2017-06-22 17:02:57
阅读次数：
178
任何系统都会有各种各样的问题，有些是系统本身设计问题，有些却是使用姿势问题。HBase也一样，在真实生产线上大家或多或少都会遇到很多问题，有些是HBase还需要完善的，有些是我们确实对它了解太少。 总结起来，大家遇到的主要问题无非是Full GC异常导致宕机问题、RIT问题、写吞吐量太低以及读延迟较... ...
分类：
其他好文 时间：
2017-06-22 12:13:48
阅读次数：
206
GridFS是Mongo的一种专门用存储小型文件的功能。 使用于下列场景： 1、写入文件：mongofiles put 文件路径 注意，当前mongo实例链接的哪个库，将写文件在哪个实例里面的gridFS系统里面，并且在当前实例选中的数据库里面增加 fs.files 用于记录文件信息，更新时间，大小 ...
分类：
数据库 时间：
2017-06-22 12:08:01
阅读次数：
168
Delphi中默认有input和output两个文件变量,使用可以不用定义,直接使用. 但: input:只读、output:只写。用时注意以免引起异常. 文件是由文件名标识的一组数据的集合，文件通常存放在磁盘上。源程序、学生档案记录、图形、音乐等均可以作为文件存储在磁盘上。操作系统是以文件为单位对 ...
