`
lgylym
  • 浏览: 54005 次
  • 性别: Icon_minigender_1
  • 来自: Athens
文章分类
社区版块
存档分类
最新评论

基于比较的排序算法的复杂度证明

阅读更多
http://hpc.ee.ntu.edu.tw/~ydlin/Ver2/psrs/index.html

以为很麻烦,今天上课听骆老师讲了一下,也不麻烦,挺有意思的。
A lower bound for the worst case

在decision tree裡,由root到各個leaf的路徑中最長的就是這個演算法在worst-case下所要做之比較的次數。顯然,這就是這個decision tree的高度(height)。也就是說,decision trees之高度的lower bound,也將是所有比較型排序演算法所需執行時間的lower bound。


Theorem: Any decision tree that sorts n elements has height Ω(n log n).

證明:

假設一個對n個輸入做排序的decision tree,其高度為h。由於n個輸入就會有n!種permutations,所以此decision tree至少必須有n!個leaves。而高度為h之binary tree至多只有2h個leaves,所以

n!≦2h

兩邊取對數,得到

h≧log(n!)

由Stirling’s approximation:


分享到:
评论

相关推荐

    不同排序算法实现及性能分析(研究生项目作业)

    通过C语言实现了这五种排序算法,并在相同规模的输入数据上进行比较,以评估它们的性能差异。 **1. 插入排序与冒泡排序** 插入排序和冒泡排序是两种简单的交换排序算法。插入排序将元素插入到已排序的部分,而冒泡...

    线性时间排序算法

    传统上,大多数排序算法如冒泡排序、选择排序等的时间复杂度至少为O(n log n),这是因为它们依赖于元素之间的比较来进行排序。然而,并非所有的排序问题都可以通过简单的比较来解决,这促使研究人员探索更为高效的...

    基于C语言排序的算法改进与应用.pdf

    文章还包含了每种排序算法改进后的C语言实现代码,并通过实例比较了改进前后的性能差异,证明了改进算法的优越性。这些实例不仅展示了算法的运行效果,也为读者提供了实际编程的参考。 总的来说,这篇论文深入浅出...

    舍伍德——快速排序源码报告和算法分析

    它基于分治策略,通常比其他O(n^2)时间复杂度的排序算法如冒泡排序、选择排序等更快。舍伍德在这个主题上进行的研究可能包括对快速排序算法的优化和性能分析。 快速排序的基本思想是选取一个基准元素,通过一趟排序...

    算法导论答案 经典

    这表明任何基于比较的排序算法的最坏情况下的时间复杂度至少为Ω(n log n)。 ### 第3章 - 增长阶函数 #### 3.1 渐进记号 - **3.1-1**:定义并理解大O、小o、θ、Ω和ω记号。 - **3.1-2**:比较不同渐进记号之间...

    《算法导论》完整的课件下载

    决策树提供了一种理论上的证明,表明任何基于比较的排序算法在最坏情况下的时间复杂度至少为 \(O(n \log n)\)。 **证明思路**: - 对于 \(n\) 个不同的元素,存在 \(n!\) 种不同的排序结果。 - 每种排序结果对应于...

    MIT 麻省理工 算法课程-第五节-讲义(经典!)

    虽然基于比较的排序算法的最坏情况时间复杂度下限为Ω(n log n),但在某些特殊情况下,我们可以使用线性时间排序算法,其时间复杂度为O(n)。 **1. 计数排序(Counting Sort)** 计数排序适用于输入范围较小的情况...

    国科大算法作业题精选题解

    快速选择算法是快速排序算法的变体,用于在未完全排序的数组中查找第k大或第k小的元素。算法的核心在于选择一个基准点(pivot),将数组分为两部分,一部分包含所有小于基准点的元素,另一部分包含所有大于基准点的...

    算法与数据结构 算法分析课程 第4章 排序算法 合并排序 共32页.pptx

    - 推论4.5进一步扩展了这一结论至两个规模分别为k和m的数组(|k-m|≤1),证明了在这种情况下任何基于键值比较的合并算法同样至少需要执行n-1次比较。 #### 三、空间复杂性分析 - **原地合并**:考虑到空间效率的...

    算法分析与设计实验报告_CQUPT.pdf

    * 本实验报告证明了快速排序算法的优越性,同时也验证了直接插入排序算法的正确性。 * 实验结果显示,快速排序算法在大规模数据排序时具有明显的优势。 相关知识点 * 排序算法的设计和分析 * 直接插入排序算法的...

    算法导论答案 中文版

    合并排序是一种基于比较的排序算法,采用分治策略进行设计。它将一个数组分为两个子数组,分别对这两个子数组进行排序,然后再将两个已排序的子数组合并成一个整体有序的数组。代码中使用了辅助数组`L`和`R`来存储...

    杨娜买验一 递归算法的设计与实现.docx

    在杨娜买验一 递归算法的设计与实现.docx中,作者设计了一个基于递归算法的插入排序算法。该算法使用递归函数来实现插入排序,实现了高效的排序。 5. 递归算法在归并排序中的应用 递归算法也可以应用于归并排序中...

    《算法导论》原版英文课件5

    - 通过决策树分析可以证明比较排序的时间复杂度下界为Ω(n log n)。 - 证明过程:一个高度为`h`的决策树最多有`2^h`个叶节点,而`n`个不同元素的排列数为`n!`。因此,我们有`2^h ≥ n!`。利用斯特林公式可以得到`h...

    算法导论答案

    - **2.3-2** 插入排序算法的空间复杂度为\(O(1)\),因为除了输入数组之外只需要常量级的额外空间。 - **2.3-3** 插入排序在实际应用中的优缺点。 - **2.3-4** 插入排序的稳定性讨论。 - **2.3-5** 插入排序与其他...

    算法导论答案(经典)

    合并排序是一种高效的排序算法,采用分而治之的策略,将数组分为两半,分别排序后,再进行合并操作。代码片段展示了合并两个已排序数组的函数`Merge`,其中利用了辅助数组`L`和`R`来存储左右两半的元素,然后比较并...

    《计算机算法-设计与分析导论》中文翻译版

    基数排序是一种非比较整数排序算法,通过按位排序来完成排序过程。 **4.9 外部排序** 外部排序是指数据量过大无法完全装入内存时所采用的排序方法。 **4.10 Shell排序** Shell排序是一种改进的插入排序算法,...

    算法导论经典答案

    通过决策树,可以证明任何基于比较的排序算法在最坏情况下的时间复杂度至少为O(nlogn)。 ### 第4章 分治策略 #### 分治算法的时间复杂度分析 分治策略是一种强大的算法设计技术,它将问题分解成若干个子问题,...

Global site tag (gtag.js) - Google Analytics