KASS分布式文件系统(Kass File System)，简称KFS，是开始公司自主研发的分布式文件存储服务平台。KFS系统架构及功能服务类似Hadoop/GFS/DFS，它通过HTTP-WEB为上层应用系统(KASS文档管理系统及各种其他应用系统)提供底层文件存储服务，搭建企业私有云存储服务平台...
分类：
其他好文 时间：
2014-10-19 18:35:04
阅读次数：
328
江湖传说永流传：谷歌技术有"三宝"，GFS、MapReduce和大表（BigTable）！谷歌在03到06年间连续发表了三篇非常有影响力的文章，各自是03年SOSP的GFS，04年OSDI的MapReduce，和06年OSDI的BigTable。SOSP和OSDI都是操作系统领域的顶级会议，在计算机...
分类：
其他好文 时间：
2014-10-10 14:15:04
阅读次数：
166
六、测试clvm和gfs2文件系统恢复所有节点都是online在集群中在web1对共享存储中的/dev/sdb2创建lvpvcreate/dev/sdb2vgcreaterhcsvg/dev/sdb2lvcreate-L1G-nlv1rhcsvglvcreate-L128M-nlv2rhcsvg在web4查看自己有没有/dev/rhcsvg/lv*没有。。。对web所有节点开启clvmd服务[root@w..
分类：
其他好文 时间：
2014-09-26 01:38:38
阅读次数：
484
前言最近在学习集群高可用，集群的高可用可以让平台架构实现服务在线时间接近7X24X365。实现高可用技术有Heartbeat、Keepalive、Corosync等等，我们这里介绍的是RedHatClusterSuite(RHCS)。本实验通过cman+rgmanager+system-config-cluster+gfs2+iscsi+clvm+qdisk来实现前端高..
分类：
其他好文 时间：
2014-09-26 00:34:18
阅读次数：
576
前言对技术，我还是抱有敬畏之心的。Hadoop概述Hadoop是一个开源分布式云计算平台，基于Map/Reduce模型的，处理海量数据的离线分析工具。基于Java开发，建立在HDFS上，最早由Google提出，有兴趣的同学可以从Google三驾马车:GFS,mapreduce,Bigtable开始了...
分类：
其他好文 时间：
2014-09-10 13:52:40
阅读次数：
298
分布式文件系统 分布式文件系统：当数据集的大小超过一台独立物理计算机的存储能力时，就有必要对它进行分区（partition）并存储到若干台单独的计算机上。管理网络中夸多台计算机存储的文件系统。这种系统构架于网络之上，肯定会引入网络编程的复杂性，因此它比普通的磁盘文件系统更为复杂。 我们首先来简单.....
分类：
其他好文 时间：
2014-09-09 23:03:59
阅读次数：
362
一、分区和文件系统1.磁盘驱动器分成分区2.使用文件系统格式化分区以便用户存储数据默认文件系统：ext3（rhel5）、ext4（rhel6）、xfs（rhel7）其他常见文件系统包括：ext2和msdos（通常用于软盘）、iso9660（通常用于CD）、GFS和GFS2（通常用于SAN）二、索引节点1.索引节点表..
分类：
系统相关 时间：
2014-09-03 02:46:16
阅读次数：
295
一、基础环境两台IBMx3650M3，操作系统CentOS5.9x64，连接一台IBMDS3400存储，系统底层采用GFS文件系统实现文件共享，数据库是另一套独立的oraclerac集群，本架构无需考虑数据库的问题。GFS文件系统及相关配置见上一文IBMx3650M3+GFS+IPMIfence生产环境配置一例。本文是在上一..
分类：
其他好文 时间：
2014-08-29 02:57:37
阅读次数：
324
江湖传说永流传：谷歌技术有"三宝"，GFS、MapReduce和大表（BigTable）！谷歌在03到06年间连续发表了三篇非常有影响力的文章，各自是03年SOSP的GFS，04年OSDI的MapReduce，和06年OSDI的BigTable。SOSP和OSDI都是操作系统领域的顶级会议，在计算机...
分类：
其他好文 时间：
2014-08-19 12:23:34
阅读次数：
199
HDFS Hadoop的核心就是HDFS与MapReduce。那么HDFS又是基于GFS的设计理念搞出来的。 HDFS全称是Hadoop Distributed System。HDFS是为以流的方式存取大文件而设计的。适用于几百MB，GB以及TB，并写一次读多次的场合。而对于低延时数据访问、大量小文...
分类：
其他好文 时间：
2014-08-18 12:21:14
阅读次数：
228
