漫画: 什么是外部排序?

举报
且听风吟 发表于 2019/10/28 09:34:45 2019/10/28
【摘要】 背景: 西天取经的路上,一样上演着编程的乐趣.....

    1.jpg

2.jpg

3.jpg

4.jpg

5.jpg

1.png

排序的时候我们可以选择快速排序或归并排序等算法。为了方便,我们把排序好的2G有序数据称之为有序子串吧。接着我们可以把两个小的有序子串合并成一个大的有序子串。

2.png

注意:读取的时候是每次读取一个int数,通过比较之后在输出。

按照这个方法来回合并,总共经过三次合并之后就可以得到8G的有序子串。

    6.jpg

7.jpg

3.png

接下来把12个数据分成4份,然后排序成有序子串

4.png

然后把子串进行两两合并

5.png

输出哪个元素,就在那个元素所在的有序子串再次读入一个元素

6.png

继续

7.png

重复直到合并成一个包含6个int的有序子串

8.png

再把两个包含6个int的有序子串合并成一个包含12个int数据的最终有序子串

9.png

8.jpg

优化策略

9.jpg

解释下:例如对于数据2,我们把无序的12个数据分成有序的4个子串需要读写各一次,把2份3个有序子串合并成6个有序子串读写各一次;把2份6个有序子串合并从12个有序子串读写各一次,一共需要读写各3次。

10.jpg

11.jpg

12.jpg


多路归并

为了方便讲解,我们假设内存一共可以装4个int型数据

    13.jpg

14.jpg

15.jpg

16.jpg

17.jpg

18.jpg

置换选择

19.jpg

20.jpg

21.jpg

22.jpg

23.jpg

24.jpg

25.jpg

例如我们可以从12个数据读取3个存到内存中,然后从内存中选出最小的那个数放进子串p1里;


之后再从在从剩余的9个数据读取一个放到内存中,然后再从内存中选出一个数放进子串p1里,这个数必须满足比p1中的其他数大,且在内存中尽量小


这样一直重复,直到内存中的数都比p1中的数小,这时p1子串存放结束,继续来p2子串的存放。例如(这时假设内存只能存放3个int型数据):


12个无序的int数据

11.png

读入3个到内存中,且选出一个最小的到子串p1

12.png

从内存中再次读取一个元素86

13.png

从内存中再次读取一个元素3

14.png

从内存中再次读取一个元素24

15.png

从内存中再次读取一个元素8

16.png

这个时候,已经没有符合要求的数了,且内存已满,进而用p2子串来存放,以此类推。


通过这种方法,p1子串存放了4个数据,而原来的那种方法p1子串只能存放3个数据。

26.jpg

27.jpg

(不知道堆排序的可以看下我之前写的文章:【算法与数据结构】堆排序是什么鬼?)


从12个数据中读取3个数据,构建成一个最小堆,然后从堆顶选择一个数写入到p1中。


之后再从剩余的9个数中读取一个数,如果这个数比刚才那个写入到p1中的数大,则把这个数插入到最小堆中,重新调整最小堆结构,然后在堆顶选一个数写入到p1中。


否则,把这个数暂放在一边,暂时不处理。之后一样需要调整堆结构,从堆顶选择一个数写入到p1中。


这里说明一下,那个被放在一边的数是不能再放入p1中的了,因为它一定比p1中的数都要小,所以它会放在下一个子串中


看这些文字会让人头大,我画图解释下吧。


从12数据读取3个数据

17.png

构建最小堆,且选出目标数

18.png

读入下一个数86

28.jpg

读入下一个数3,比70小,暂放一边,不加入堆结构中

29.jpg

读入下一个数据24,比81小,不加入堆结构

30.jpg

读入下一个数据8,比86小,不加入堆结构。此时p1已经完成了,把那些刚才暂放一边的数重新构成一个堆,继续p2的存放。

31.png

以此类推...

最后生成的p2如下:

32.png

31.jpg

32.jpg

33.jpg

34.jpg

这种方法适合要排序的数据太多,以至于内存一次性装载不下。只能通过把数据分几次的方式来排序,我们也把这种方法称之为外部排序。

35.jpg

本文转载自公众号【java学习之道】。

原文链接:https://mp.weixin.qq.com/s?__biz=MzU4NzYwNDAwMg==&mid=2247484536&idx=3&sn=2a5742da066aaddd7986ac9bc3f969f0&chksm=fde8cd35ca9f44235fa0486ed8a4627f913cea97507dd362323f87d3b75f78a7e332ac712434&scene=0#rd


【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。