稀疏文件是指一个文件中大部分内容都是空字符的文件。如虚拟机创建的100G的磁盘文件是,但系统不会马上分割出100G的空间,而是仅标识出虚拟硬盘文件是稀疏文件,待到数据存储时,再分配空间,这样可以大大的节约磁盘利用率。稀疏文件在进行cp/scp/split/cat时,会由标识的稀疏..
分类:
系统相关 时间:
2017-06-08 18:00:05
阅读次数:
168
索引压缩的作用 词典压缩 倒排记录表压缩 参考资料:《信息检索导论》-- 第五章 ...
分类:
其他好文 时间:
2017-04-12 11:03:21
阅读次数:
160
概要简介Perfstat是一个Netapp存储诊断数据命令行收集工具,该工具能够收集Netapp存储的详尽的信息,包括配置信息和性能数据,针对于Netapp存储OS的2种模式分别有两个版本:存储模式Perfstat版本7modePerfstat7ClusterModePerfstat8perfstat7.x用于收集7modeNetapp存储的信息,..
分类:
移动开发 时间:
2017-04-01 22:21:48
阅读次数:
771
Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况,比如集群中添加新的数据节点。当HDFS出现不平衡状况的时候,将引发很多问题,比如MR程序无法很好地利用本地计算的优势,机器之间无法达到更好的网络带宽使用率,机器磁盘无法利用等等。可见,保证HDFS中的数据平衡是非常重要的。 ...
分类:
其他好文 时间:
2016-09-12 12:18:05
阅读次数:
141
转自:http://www.aboutyun.com/thread-7354-1-1.html 集群平衡介绍 Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况,比如集群中添加新的数据节点。当HDFS出现不平衡状况的时候,将引发很多问题,比如MR程序无法很好地利用本地计算的优 ...
分类:
其他好文 时间:
2016-05-18 21:29:55
阅读次数:
150
Raid:RedundantArraysofIndependentDisks0表示条带化1表示镜像raidlevel:级别、仅代表磁盘组织方式不同,没有上下之分Raid类型读写性能硬盘数量机制可靠性磁盘利用率Raid0读写都提升至少2块条带技术无nRaid1写下降、读提升至少2块镜像(copy)允许坏一块盘1/2Raid4读写都提升..
分类:
其他好文 时间:
2016-05-02 17:13:16
阅读次数:
220
cat 192.168.101.* | grep load | awk '{sum+=$4} END {print "average=", sum/NR}' cat 192.168.101.* | grep Memory | awk '{sum+=$3} END {print "average=", ...
分类:
其他好文 时间:
2016-04-22 18:08:43
阅读次数:
170
rrdtool(round robin database)工具为环状数据库的存储格式,round robin是一种处理定量数据以及当前元素指针的技术。rrdtool主要用来跟踪对象的变化情况,生成这些变化的走势图,比如业务的访问流量、系统性能、磁盘利用率等趋势图,很多流行监控平台都使用到rrdto....
分类:
编程语言 时间:
2015-12-10 11:01:34
阅读次数:
278
资源利用率指的是对不同的系统资源的使用程度,例如服务器的CPU利用率,磁盘利用率等.资源利用率是分析系统性能指标进而改善性能的主要依据,因此是WEB性能测试工作的重点.资源利用率主要针对WEB服务器,操作系统,数据库服务器,网络等,是测试和分析瓶颈的主要参考.在WEB性能测试中,更根据需要采集相应的...
分类:
Web程序 时间:
2015-11-06 09:35:15
阅读次数:
240
raid分为软备份和硬备份 软备份主要用来实验 应备份用于生产环境 raid0(带区卷) 具有很高的数据传输率,没有数据的冗余 1块磁盘 raid1(镜像卷) 提供数据冗余,利用率低 2块磁盘 raid10(带区卷+镜像卷)磁盘利用率低,数据传输快 3块磁盘 raid5 数据传输慢,利用率低 4块磁...
分类:
其他好文 时间:
2015-07-07 00:51:42
阅读次数:
183