1. MapReduce 与 HDFS 简介 什么是 Hadoop ？ Google 为自己的业务需要提出了编程模型 MapReduce 和分布式文件系统 Google File System，并发布了相关论文（可在 Google Research 的网站上获得：GFS、MapReduce）。Dou ...
分类：
其他好文 时间：
2017-09-05 00:18:37
阅读次数：
167
Mfs分布式文件系统前言：前面我们学习过NFS，以及虚拟化课程的时候我们学习过openfiler，这两个都是属于存储服务器。但是他们有着共同的缺点，就是性能不好，因为都是通过共享方式共享一个存储空间，使得服务器不堪重负，会出现超时的问题，而且存在着单点故障问题，尽管可以用..
分类：
其他好文 时间：
2017-09-04 15:03:27
阅读次数：
298
1：分布式文件系统（Distributed File System）： （1）：数据量越来越多，在一个操作系统管辖的范围存不下了，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，因此迫切需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统 。（2）：是一种允许文件通过网络在多台 ...
分类：
其他好文 时间：
2017-09-03 17:55:36
阅读次数：
198
MFS分布式文件系统一、实验环境三、Mfs分布式文件系统详解1、分布式原理分布式文件系统就是把一些分散在多台计算机上的共享文件夹，集合到一个共享文件夹内，用户要访问这些文件夹的时候，只要打开一个文件夹，就可以的看到所有链接到此文件夹内的共享文件夹。2、MFS原理MFS是..
分类：
其他好文 时间：
2017-09-02 00:17:03
阅读次数：
795
人肉告知的方式：如果你发现你的服务一台机器不够，要再添加一台，这个时候就要告诉调用者我现在有两个ip了，你们要轮询调用来实现负载均衡；调用者咬咬牙改了，结果某天一台机器挂了，调用者发现服务有一半不可用，他又只能手动修改代码来删除挂掉那台机器的ip。现实生产环境当然不会使用人肉方式。 有没有一种方法能 ...
分类：
其他好文 时间：
2017-08-30 20:06:09
阅读次数：
174
FastDFS开源的分布式文件系统，功能包括：文件存储，文件同步，文件访问（文件上传，文件下载等），解决了大容量存储和负载均衡的问题，特别适合以文件为载体的在线服务，如服务网站，视频网站等 FastDFS服务端有2个角色，跟踪器和存储节点，跟踪器主要做的高度工作，在访问上起负载均衡的作用，存储节点存 ...
分类：
其他好文 时间：
2017-08-29 21:43:52
阅读次数：
135
hadoop分别从3个角度将主机划分为2种角色 最基本的是Master 和 从HDFS角度，将主机划分为namenode和datanode，在分布式文件系统中，目录管理很重要，管理目录相当于主人 从mapreduce角度，划分为jobtracker和tasktracker（一个job常被划分为多个t ...
分类：
其他好文 时间：
2017-08-29 21:38:45
阅读次数：
162
1. 本地存储是指将数据存放到本地磁盘、或移动硬盘、U盘、光盘等存储设备上。 通俗来说就是把自己的数据如文档、视频、图片、音乐等，存到到自己的电脑上、或存放到移动硬盘、U盘、光盘上。 2. 云存储是一种新兴的网络存储技术，是指通过集群应用、网络技术或分布式文件系统等功能，将网络中大量各种不同类型的存 ...
分类：
其他好文 时间：
2017-08-25 17:00:20
阅读次数：
173
FastDFS分布式文件系统 FastDFS安装,FastDFS,fastdfs,spring,springmvc,spring mvc,web开发,java分布式架构, 愿意了解框架技术或者源码的朋友直接求求交流分享技术：2042849237 更多详细源码参考来源：http://minglis... ...
分类：
其他好文 时间：
2017-08-24 10:37:50
阅读次数：
108
HDFS ,Hadoop Distribute File System,hadoop分布式文件系统。 主从架构，分主节点NameNode,从节点DataNode.当然还有个SecondaryName,但这不是浅析里的点.这里主要讲下namenode和datanode的基本概念， 并描述下读写过程. ...
分类：
其他好文 时间：
2017-08-24 10:24:54
阅读次数：
201
