分布式文件系统即是网络中多台计算机组合在一起提供一个统一存储及管理的系统。Hadoop提供了一个文件系统接口和多个分布式文件系统实现，其中比较重要的就是HDFS（Hadoop Distributed Filesystem）了。Hadoop是一个综合性的文件系统抽象，因此它也可以集成其他文件系统的实现，如本地文件系统和Amazon S3系统及淘宝 TFS等。概念模型...
分类：
其他好文 时间：
2014-10-20 10:00:53
阅读次数：
281
HBase通常安装在Hadoop HDFS上，但也可以安装在其他实现了Hadoop文件接口的分布式文件系统上，如KFS。glusterfs是一个集群文件系统可扩展到几peta-bytes。它集合了各种存储在infiniband rdma或互连成一个大型并行网络文件系统。存储可以由任何商品等硬件x86_64服务器和sata-ii和infiniband HBA。GlusterFS比Hadoop HDFS可以提供更高的性能，HBase也因此可以获得更高的性能。将HBase安装在GlusterFS上，是可行的。该方...
分类：
系统相关 时间：
2014-10-19 23:22:18
阅读次数：
372
KASS分布式文件系统(Kass File System)，简称KFS，是开始公司自主研发的分布式文件存储服务平台。KFS系统架构及功能服务类似Hadoop/GFS/DFS，它通过HTTP-WEB为上层应用系统(KASS文档管理系统及各种其他应用系统)提供底层文件存储服务，搭建企业私有云存储服务平台...
分类：
其他好文 时间：
2014-10-19 18:35:04
阅读次数：
328
学习云计算，必然得了解Hadoop，而Hadoop中的HDFS（分布式文件系统）是一个基础，接下来就写一下我所理解的HDFS。 有一个很有特别的村庄，村庄里面有一个很牛逼的人，叫做“大哥”，村民们都信得过他，于是会把自己家的粮食、农具等等各种各样的东西“打包成一个大的包裹”让“大哥”给存着，等...
分类：
其他好文 时间：
2014-10-18 11:01:31
阅读次数：
255
Hadoop分布式文件系统是设计初衷是可靠的存储大数据集，并且使应用程序高带宽的流式处理存储的大数据集。在一个成千个server的大集群中，每个server不仅要管理存储的这些数据，而且可以执行应用程序任务。通过分布式存储和在各个server间交叉运算，集群和存储可以按需动态经济增长。以下的设计原则...
分类：
其他好文 时间：
2014-10-17 06:42:33
阅读次数：
235
一、Tachyon介绍Tachyon是一个高容错的分布式文件系统，允许文件以内存的速度在集群框架中进行可靠的共享，就像Spark和MapReduce那样。通过利用信息继承，内存侵入，Tachyon获得了高性能。Tachyon工作集文件缓存在内存中，并且让不同的Jobs/Queries以及框架都能内存的速度来访..
分类：
其他好文 时间：
2014-10-14 21:33:59
阅读次数：
638
一、分布式文件系统简介1、分布式系统定义？分布式系统没有统一的定义，各说纷纾从服务器角度来说具有以下特点：1、系统中的各个组件分布于网路上的多个计算机；2、各个组件彼此之间通过消息传递来通信并协调行动。但是从客户端来说，看不出这些特性，不影响用户体验。2、为什..
分类：
其他好文 时间：
2014-10-09 03:25:58
阅读次数：
517
分布式文件系统：1：系统的各个组件分布于网络上的多个计算机上2：各组件彼此之间仅仅通过消息传递来通信并协调运行分布式文件系统存在的意义：A:向上扩展的性价比越来越低；单机扩展存在性能的临界点B:出稳定性及可用性考虑，单机会存在多方面的问题CPU内存IO：性能网络IO多进..
分类：
其他好文 时间：
2014-10-08 14:49:26
阅读次数：
458
本篇文章是我上级老大所写。 留在这里为了不弄丢。
FastDFS是一款开源的轻量级分布式文件系统
纯C实现，支持Linux, FreeBSD等UNIX系统
类google FS, 不是通用的文件系统，只能够通过专有API访问，目前提供了C，Java和PHP API
为互联网应用量身定做，解决大容量文件存储问题，追求高性能和高扩展性
FastDFS可以看做是基于文件的key-val...
分类：
其他好文 时间：
2014-10-08 13:44:05
阅读次数：
300
