码迷,mamicode.com
首页 >  
搜索关键字:分布式文件系    ( 1397个结果
Hadoop快速入门
目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会,比如在HDFS上运行示例程序或简单作业等。 先决条件 支持平台 GNU/Linux是产品开发和运行的平台。 Hadoop已在有2000个节点的GNU/L
分类:其他好文   时间:2016-02-19 20:34:09    阅读次数:231
【Linux--中级篇】MFS分布式文件系统
MFS分布式文件系统1.实验环境主机操作系统IP地址主要软件MasterServerCentOS6.5x86_64192.168.10.10mfs-1.6.27-5.tar.gzMasterLoggerServerCentOS6.5x86_64192.168.10.11mfs-1.6.27-5.tar.gzChunkServer1CentOS6.5x86_64192.168.10.15mfs-1.6.27-5.tar.gzChunkServer2CentOS6.5..
分类:系统相关   时间:2016-02-19 14:37:43    阅读次数:306
hadoop知识体系
目录结构知识点还是挺全的,可以按照点学习。 一、Hadoop入门,了解什么是Hadoop 二、分布式文件系统HDFS,是数据库管理员的基础课程 1、Hadoop产生背景 2、Hadoop在大数据、云计算中的位置和关系 3、国内外Hadoop应用案例介绍 4、国内Hadoop的就业情况分析及课程大纲介
分类:其他好文   时间:2016-02-12 14:00:10    阅读次数:196
[Hadoop] Hadoop学习历程 [持续更新中…]
1. Hadoop FS Shell Hadoop之所以可以实现分布式计算,主要的原因之一是因为其背后的分布式文件系统(HDFS)。所以,对于Hadoop的文件操作需要有一套全新的shell指令来完成,而这就是Hadoop FS Shell。它主要是用于对Hadoop平台进行文件系统的管理。 有关H
分类:其他好文   时间:2016-02-05 19:07:34    阅读次数:263
hdfs介绍
HDFS:分布式文件系统,提供高吞吐量的应用程序数据访问,对外部客户机而言,HDFS就像一个传统的分级文件系统。可以创建、删除、移动或重命名文件,等等。但是HDFS的架构是基于一组特定的节点构建的,这是由它自身的特点决定的。这些节点包括NameNode(仅一个),它在HDFS内部..
分类:其他好文   时间:2016-02-04 19:11:50    阅读次数:194
分布式文件系统MogileFS
一、分布式文件系统介绍定义:分布式存储系统是大量普通PC服务器通过与Internet互联,对外作为一个整体提供存储服务。分布式文件系统,顾名思义,就是分布式+文件系统。它包含这两个方面的内涵,从文件系统的客户端使用的角度来看,它就是一个标准的文件系统,提过一系列的API..
分类:其他好文   时间:2016-02-03 14:34:59    阅读次数:232
Java API操作HDFS
HDFS是存储数据的分布式文件系统,对HDFS的操作,就是对文件系统的操作,除了用HDFS的shell命令对文件系统进行操作,我们也可以利用Java API对文件系统进行操作,比如文件的创建、删除、修改权限等等,还有文件夹的创建、删除、重命名等等。 使用Java API对文件系统进行操作主要涉及以下
分类:编程语言   时间:2016-01-31 21:35:02    阅读次数:300
分布式文件系统以及对相关节点的简单理解
Distributed File System 1.数据量越来越多,在一个操作系统管辖的范围存储不下来,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,因此迫切需要一种系统来管理多台机器上的文件,分布式文件系统由此产生。 2.它是一种允许文件通过网络在多台主机上分享的文件系统,可以让多
分类:其他好文   时间:2016-01-31 21:14:47    阅读次数:384
openstack运维实战系列(十七)之glance与ceph结合
1.需求说明glance作为openstack中p_w_picpath服务,支持多种适配器,支持将p_w_picpath存放到本地文件系统,http服务器,ceph分布式文件系统,glusterfs和sleepdog等开源的分布式文件系统上,本文,通过将讲述glance如何和ceph结合。目前glance采用的是本地filesystem的方式存..
分类:其他好文   时间:2016-01-29 03:45:27    阅读次数:523
Hadoop 4、Hadoop MapReduce的工作原理
MapReduce是hadoop的核心组件之一,hadoop要分布式包括两部分,一是分布式文件系统hdfs,一部是分布式计算框就是mapreduce,两者缺一不可,也就是说,可以通过mapreduce很容易在hadoop平台上进行分布式的计算编程。
分类:其他好文   时间:2016-01-28 17:16:53    阅读次数:201
1397条   上一页 1 ... 96 97 98 99 100 ... 140 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!