码迷,mamicode.com
首页 > 编程语言 > 详细

19. 蛤蟆的数据结构进阶十九外部排序相关概念

时间:2015-08-21 23:20:19      阅读:236      评论:0      收藏:0      [点我收藏+]

标签:

19. 蛤蟆的数据结构进阶十九外部排序相关概念

本篇名言:“一个人最怕不老实,青年人最可贵的是老实作风。 "老实 " 就是不自欺欺人,做到不欺骗人家容易,不欺骗自己最难。 "老实作风 " 就是脚踏实地,不占便宜。世界上没有便宜的事,谁想占便宜水就会吃亏。 --徐特立”

之前我们学习的排序都是内部排序的,接下去来看下外部排序。

 欢迎转载,转载请标明出处:http://blog.csdn.net/notbaron/article/details/47844037

1.  外部排序

指的是大文件(外存文件)中的记录进行排序的过程,即待排序的记录存储在外存储器上,在排序过程中需进行多次的内、外存之间的交换。

外部排序基本上由两个相对独立的阶段组成。

 (1)首先,按可用内存大小,将外存上含n个记录的文件分成若干长度为 L的子文件或段,依次读入内存并利用有效的内部排序方法对它们进行排序,并将排序后得到的有序子文件重新写入外存。通常称这些有序子文件为归并段或顺串。

(2)然后,对这些归并段进行逐趟归并,使归并段(有序的子文件)逐渐由小至大,直至得到整个有序文件为止。


1.1             举例说明

假设有一个含10000个记录的文件,首先通过10次内部排序得到10个初始归并段R1~R10,其中每一段都含1000个记录。然后对它们作如下图所示的两两归并,直至得到一个有序文件为止。

技术分享

    上图可见,由10个初始归并段到一个有序文件,共进行了四趟归并,每一趟从 m 个归并段得到[m/2]个归并段。这种归并方法称为2-路平衡归并。

    假设,在上例中每个物理块可以容纳 200个记录,则每一趟归并需进行50次“读”和50次“写”,四趟归并加上内部排序时所需进行的读/写使得在外排中总共需进行500次的读/写。

一般情况下,外部排序所需总的时间 =

   内部排序(产生初始归并段)所需的时间 M * tIS

        +   外存信息读写的时间 d * tIO

        +   内部归并所需的时间 S * utmg

其中:

  M   经过内部排序之后得到的初始归并段的个数;

  tIS  为得到一个初始归并段进行内部排序所需时间的均值

  d   总的读/写次数;

  tIO  进行一次外存读/写时间的均值;

  S   归并的趟数;

  utmg 对u个记录进行内部归并所需时间。

由此,上例 10000个记录利用2一路归并进行外排所需总的时间为:  10* tIS+500* tIO+4*10000tmg

其中tIO取决于所用的外存设备,显然,tIO (进行一次外存读/写时间的均值)较tmg (内部归并所需时间)要大得多。因此,提高外排的效率应主要着眼于减少外存信息读写的次数 d 。

 

1.2             分析外存信息读写的次数d和“归并过程”的关系

若对上例中所得的10个初始归并段进行5-路平衡归并(即每一趟将5个或5个以下的有序子文件归并成一个有序子文件),则从下图可见,仅需进行2趟归并,外排时总的读/写次数便减至 2 x 100+ 100= 300,比 2-路归并减少了 200次的读/写。

技术分享

可见,对同一文件而言,进行外排时所需读/写外存的次数和归并的趟数S成正比而在一般情况下, m个初始归并段进行 k-路平衡归并时,归并的趟数

            s = [km]

可见,若增加 k 或减少 m 便能减少 s 。

 

 

 

 

 

版权声明:本文为博主原创文章,未经博主允许不得转载。

19. 蛤蟆的数据结构进阶十九外部排序相关概念

标签:

原文地址:http://blog.csdn.net/notbaron/article/details/47844037

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!