码迷,mamicode.com
首页 >  
搜索关键字:分布式文件系    ( 1397个结果
FastDFS轻量级分布式文件系统部署
FastDFS介绍 FastDFS 是一个由 C 语言实现的开源轻量级分布式文件系统,作者余庆,支持 Linux、FreeBSD、AID 等 Unix 系统,解决了大数据存储和读写负载均衡等问题,适合存储 4KB~500MB 之间的小文件,如图片网站、短视频网站、文档、app 下载站等,UC、京东、 ...
分类:其他好文   时间:2018-05-28 19:47:50    阅读次数:198
分布式文件系统介绍
常见的分布式文件系统有,GFS、HDFS、Lustre 、Ceph 、GridFS 、mogileFS、TFS、FastDFS等。各自适用于不同的领域。它们都不是系统级的分布式文件系统,而是应用级的分布式文件存储服务。 Google学术论文,这是众多分布式文件系统的起源 Google File Sy ...
分类:其他好文   时间:2018-05-25 21:11:16    阅读次数:185
分布式文件系统FastDFS集群部署
1、源码开放下载地址:https://github.com/happyfish100 早期源码开放下载地址:https://sourceforge.net/projects/fastdfs/files/ 官网论坛:http://bbs.chinaunix.net/forum-240-1.html 2 ...
分类:其他好文   时间:2018-05-25 14:04:38    阅读次数:182
阿里巴巴,排行前10的开源项目
1、FastDFS FastDFS是一个开源的分布式文件系统,她对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。 2、Dubbo Dubbo 是阿里巴巴公司开源的一个高性能优秀 ...
分类:其他好文   时间:2018-05-25 14:00:02    阅读次数:142
hadoo之HDFS
分布式文件系统HDFS 需要实现以下的一些目标: 1. 廉价的硬件设备 2. 流数据读写(和传统系统区别的地方,全部的数据一股脑的读取) 3. 大数据集(一个文件可能有时候大到好几个T) 4. 简单的文件模型(获取了批量处理的特性,只能追加,不可以修改) 5. 强大的跨平台特性(java开发的) H ...
分类:其他好文   时间:2018-05-24 23:05:18    阅读次数:244
大数据知识学习及云计算
https://www.cnblogs.com/xing901022/p/6195422.html "介绍知识点" [大数据技术原理与应用视频 ](http://www.icourse163.org/learn/XMU 1002335004?tid=1002787005 /learn/content ...
分类:其他好文   时间:2018-05-22 12:41:50    阅读次数:175
RHCS
************************************************************************************************** ◆案例◆ RHCS搭建高可用分布式文件系统 【注意:RHCS只在RHEL 6 中存在 RHEL 7已经 ...
分类:其他好文   时间:2018-05-20 13:02:21    阅读次数:251
MooseFS
************************************************************************************************** ◆案例◆ 部署MooseFS分布式文件系统****************************** ...
分类:其他好文   时间:2018-05-20 11:45:52    阅读次数:260
Hadoop介绍
一:来源 雅虎 >谷歌两篇论文GFS,mapreduce。 二:组成 hadoop common:支持其他Hadoop模块的常用工具。 HDFS:分布式文件系统,提供对应用程序数据的高吞吐量访问。全称:Hadoop Distributed File System。 hadoop yarn:作业调度和 ...
分类:其他好文   时间:2018-05-19 20:35:30    阅读次数:243
大数据技术(一)大数据软件框架
一、Hadoop框架 1.HDFS(分布式文件系统) 2.MapReduce(分布式计算框架) 3.YARN(集群资源管理器) 4.Zookeeper(分布式协作服务) 5.Ambari(管理工具) 二、Spark(内存计算框架) 1.Scala 2.Spark SQL 3.Spark Stream ...
分类:其他好文   时间:2018-05-18 11:28:00    阅读次数:137
1397条   上一页 1 ... 43 44 45 46 47 ... 140 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!