【数据结构】堆的应用 -- 堆排序和TopK问题

简介: 【数据结构】堆的应用 -- 堆排序和TopK问题

前言

在开始这一节的内容之前,我们先来回顾一下与堆相关的重点:

1、堆是二叉树顺序存储结构的一个具体体现,堆中每个节点的值总是不大于或不小于其父节点的值 (大堆/小堆),堆总是一棵完全二叉树,堆使用顺序表存储元素;


2、堆中父节点下标的计算公式:(n-1)/2,左孩子下标:n*2+1,右孩子下标:n*2+2;


3、堆只能在尾部插入数据,且插入数据后需要保证堆的结构,所以在插入数据之后我们要进行向上调整,向上调整的时间复杂度为O(log N) (log 以2为底) ;


4、堆只能在头部删除数据,且删除数据后需要保证堆的结构,又因为顺序表头删需要挪动数据,效率很低,所以在堆删除数据会先将堆顶和堆尾的数据进行交换,然后让 size–,再进行向下调整,向下调整的时间复杂度为O(log N) (log 以2为底) 。

堆排序

堆排序是选择排序的一种,它的时间复杂度为 O(N*logN),空间复杂度为 O(1)。

1、建堆

堆排序的第一步就是建堆,建堆有两种方法:向上调整建堆和向下调整建堆。

向上调整建堆: 把数组的第一个元素作为堆的根节点,然后在堆尾依次插入其余元素,每插入一个元素就向上调整一次,从而保证堆的结构;

image.png

向上调整建堆的时间复杂度: 由于堆是完全二叉树,而满二叉树是完全二叉树的一种,所以此处为了简化计算,使用满二叉树来得出时间复杂度 (时间复杂度本身看的就是近似值,多几个节点不影响最终结果):

2020062310470442.png

如上图,我们把每一次的节点个数除以每一个节点需要调整的次数,最后再求和,就可以得到一共需要调整的次数;然后再根据满二叉树节点总数与树的高度的关系将表达式中的h替换掉,最终可以得到向上调整建堆的时间复杂度为:O(N*logN)

向下调整建堆: 从倒数第一个非叶子节点 (即最后一个叶节点的父节点) 开始向下调整,直到调整到根。

image.png

向下调整建堆的时间复杂度: 

2020062310470442.png


如上图,向下调整建堆的时间复杂度为:O(N)

综合上面两种建堆方法,建堆的时间复杂度为:O(N)

2、选数

现在我们建堆工作已经完成了,接下来就是选数,假设现在我们要排升序,那么方法一共有三种:


1、建小堆,开辟一个和原数组同等大小的新数组,每次取出堆顶的元素 (最小的元素) 放在新数组中,然后挪动数组中的数据,最后排好序以后再将新数组中的数据覆盖至原数组;


缺点:每次挪动数据的效率很低,且挪动数据会造成堆中其余元素父子关系混乱,需要重新建堆,而建堆的时间复杂度也是O(N),所以二者嵌套后时间复杂度:O(N^2),空间复杂度:O(N);


2、也是建小堆,不过这次我们借鉴堆 pop 数据的方法,先将堆顶的元素放入新数组中,然后交换堆顶和堆尾的元素,之后再向下调整数组中前 n-1 个数据,直到排好序,最后将排好序以后再将新数组中的数据覆盖至原数组;


缺点:虽然此方法可以让我们每次都拿到数组中最小的元素,但是需要开辟额外的空间,时间复杂度:O(N*logN),空间复杂度:O(N);


3、建大堆,先将堆顶和堆尾的数据进行交换,使得数组中最大的元素处于数组末尾,然后向下调整前 n-1 个元素,使得次大的数据位于堆顶,最后重复前面的步骤,把次大的数据存放到最大的数据之前,直到数组有序;


优点:没有额外的空间消耗,且效率达到了 O(N*logN);


综合上面三种选数的方法,选数的时间复杂度为:O(N*logN),空间复杂度为:O(1);

3、代码

//交换两个节点
void Swap(int* p1, int* p2)
{
  int tmp = *p1;
  *p1 = *p2;
  *p2 = tmp;
}
//向上调整 -- 大堆
void AdjustUp(int a[], int child)
{
  int parent = (child - 1) / 2;  //找出父节点
  while (child > 0)  //当调整到根节点时不再调整
  {
    if (a[parent] < a[child])
    {
      Swap(&a[parent], &a[child]);
    }
    else
    {
      break;
    }
    //迭代
    child = parent;
    parent = (child - 1) / 2;
  }
}
//向下调整 -- 大堆
void AdjustDown(int a[], int n, int parent)
{
  int maxchild = parent * 2 + 1;  //找到左孩子(左孩子+1得到右孩子)
  while (maxchild < n)  //调整到数组尾时不再调整
  {
    if (maxchild + 1 < n && a[maxchild + 1] > a[maxchild])
    {
      maxchild += 1;
    }
    if (a[parent] < a[maxchild])
    {
      Swap(&a[parent], &a[maxchild]);
    }
    else
    {
      break;
    }
    //迭代
    parent = maxchild;
    maxchild = parent * 2 + 1;
  }
}
void HeapSort(int a[], int n)
{
  //建堆 -- 向上调整建堆:O(N*logN)
  //int i = 1;
  //for (i = 1; i < n; i++)
  //{
  //  AdjustUp(a, i);
  //}
  //建堆 -- 向下调整建堆:O(N)
  for (int i = (n - 1 - 1) / 2; i >= 0; i--)  //n-1找到最后一个叶节点,该节点-1/2找到倒数第一个父节点
  {
    AdjustDown(a, n, i);
  }
  //排序 -- 升序(建大堆,向下调整):O(N*logN)
  for (int i = n - 1; i > 0; i--)
  {
    Swap(&a[i], &a[0]);  //交换堆尾和堆顶的元素
    AdjustDown(a, i, 0);  //向下调整
  }
}
int main()
{
  int a[] = { 15, 1, 19, 25, 8, 34, 65, 4, 27, 7 };
  int n = sizeof(a) / sizeof(a[0]);
  //堆排序
  HeapSort(a, n);
  for (int i = 0; i < n; i++)
  {
    printf("%d ", a[i]);
  }
  return 0;
}

2020062310470442.png

TopK 问题

TOP-K问题:即求数据结合中前K个最大的元素或者最小的元素,一般情况下数据量都比较大;比如:专业前10名、世界500强、富豪榜、游戏中前100的活跃玩家等。


对于Top-K问题,能想到的最简单直接的方式就是排序,但是,如果数据量非常大,排序就不太可取了 (数据都不能一下子全部加载到内存中),最佳的方式就是用堆来解决,基本思路如下:


第一步:用数据集合中前K个元素来建堆 – 前k个最大的元素,则建小堆;前k个最小的元素,则建大堆;


第二步:用剩余的N-K个元素依次与堆顶元素来比较,不满足则替换堆顶元素;

//交换两个节点
void Swap(int* p1, int* p2)
{
  int tmp = *p1;
  *p1 = *p2;
  *p2 = tmp;
}
//向下调整 -- 小堆
void AdjustDown(int a[], int n, int parent)
{
  int minchild = parent * 2 + 1;  //找到左孩子(左孩子+1得到右孩子)
  while (minchild < n)  //调整到数组尾时不再调整
  {
    if (minchild + 1 < n && a[minchild + 1] < a[minchild])
    {
      minchild += 1;
    }
    if (a[parent] > a[minchild])
    {
      Swap(&a[parent], &a[minchild]);
    }
    else
    {
      break;
    }
    //迭代
    parent = minchild;
    minchild = parent * 2 + 1;
  }
}
int* TopK(int a[], int n, int k)
{
  //开辟K个元素的空间
  int* minHeap = (int*)malloc(sizeof(int) * k);
  if (minHeap == NULL)
  {
    perror("malloc fail");
    return NULL;
  }
  //将数组前K个元素拷贝到新空间
  for (int i = 0; i < k; i++)
  {
    minHeap[i] = a[i];
  }
  //建小堆 -- 向下调整建堆:O(N)
  for (int i = (k - 1 - 1) / 2; i >= 0; i--)  //n-1找到最后一个叶节点,该节点-1/2找到倒数第一个父节点
  {
    AdjustDown(minHeap, k, i);
  }
  //取后N-k个元素与堆顶元素比较,如果大于堆顶元素,就入堆
  for (int i = k; i < n; i++)
  {
    if (minHeap[0] < a[i])
    {
      minHeap[0] = a[i];
      AdjustDown(minHeap, k, 0);
    }
  }
  return minHeap;
}
int main()
{
  int a[] = { 15, 1, 19, 25, 8, 34, 65, 4, 27, 7 };
  int n = sizeof(a) / sizeof(a[0]);
  //TopK问题 -- 前K个最大的元素
  int k = 3;
  int* ret = TopK(a, n, k);
  for (int i = 0; i < k; i++)
  {
    printf("%d ", ret[i]);
  }
  free(ret);
  ret = NULL;
  return 0;
}

2020062310470442.png



相关文章
|
3月前
|
存储 算法 Java
散列表的数据结构以及对象在JVM堆中的存储过程
本文介绍了散列表的基本概念及其在JVM中的应用,详细讲解了散列表的结构、对象存储过程、Hashtable的扩容机制及与HashMap的区别。通过实例和图解,帮助读者理解散列表的工作原理和优化策略。
53 1
散列表的数据结构以及对象在JVM堆中的存储过程
|
4月前
|
存储 Java
Java中的HashMap和TreeMap,通过具体示例展示了它们在处理复杂数据结构问题时的应用。
【10月更文挑战第19天】本文详细介绍了Java中的HashMap和TreeMap,通过具体示例展示了它们在处理复杂数据结构问题时的应用。HashMap以其高效的插入、查找和删除操作著称,而TreeMap则擅长于保持元素的自然排序或自定义排序,两者各具优势,适用于不同的开发场景。
59 1
|
4月前
|
机器学习/深度学习 存储 人工智能
数据结构在实际开发中的广泛应用
【10月更文挑战第20天】数据结构是软件开发的基础,它们贯穿于各种应用场景中,为解决实际问题提供了有力的支持。不同的数据结构具有不同的特点和优势,开发者需要根据具体需求选择合适的数据结构,以实现高效、可靠的程序设计。
255 63
|
3月前
|
存储 缓存 算法
在C语言中,数据结构是构建高效程序的基石。本文探讨了数组、链表、栈、队列、树和图等常见数据结构的特点、应用及实现方式
在C语言中,数据结构是构建高效程序的基石。本文探讨了数组、链表、栈、队列、树和图等常见数据结构的特点、应用及实现方式,强调了合理选择数据结构的重要性,并通过案例分析展示了其在实际项目中的应用,旨在帮助读者提升编程能力。
92 5
|
3月前
|
并行计算 算法 测试技术
C语言因高效灵活被广泛应用于软件开发。本文探讨了优化C语言程序性能的策略,涵盖算法优化、代码结构优化、内存管理优化、编译器优化、数据结构优化、并行计算优化及性能测试与分析七个方面
C语言因高效灵活被广泛应用于软件开发。本文探讨了优化C语言程序性能的策略,涵盖算法优化、代码结构优化、内存管理优化、编译器优化、数据结构优化、并行计算优化及性能测试与分析七个方面,旨在通过综合策略提升程序性能,满足实际需求。
86 1
|
3月前
|
缓存 NoSQL PHP
Redis作为PHP缓存解决方案的优势、实现方式及注意事项。Redis凭借其高性能、丰富的数据结构、数据持久化和分布式支持等特点,在提升应用响应速度和处理能力方面表现突出
本文深入探讨了Redis作为PHP缓存解决方案的优势、实现方式及注意事项。Redis凭借其高性能、丰富的数据结构、数据持久化和分布式支持等特点,在提升应用响应速度和处理能力方面表现突出。文章还介绍了Redis在页面缓存、数据缓存和会话缓存等应用场景中的使用,并强调了缓存数据一致性、过期时间设置、容量控制和安全问题的重要性。
60 5
|
3月前
|
存储 搜索推荐 算法
【数据结构】树型结构详解 + 堆的实现(c语言)(附源码)
本文介绍了树和二叉树的基本概念及结构,重点讲解了堆这一重要的数据结构。堆是一种特殊的完全二叉树,常用于实现优先队列和高效的排序算法(如堆排序)。文章详细描述了堆的性质、存储方式及其实现方法,包括插入、删除和取堆顶数据等操作的具体实现。通过这些内容,读者可以全面了解堆的原理和应用。
136 16
|
3月前
|
C语言
【数据结构】栈和队列(c语言实现)(附源码)
本文介绍了栈和队列两种数据结构。栈是一种只能在一端进行插入和删除操作的线性表,遵循“先进后出”原则;队列则在一端插入、另一端删除,遵循“先进先出”原则。文章详细讲解了栈和队列的结构定义、方法声明及实现,并提供了完整的代码示例。栈和队列在实际应用中非常广泛,如二叉树的层序遍历和快速排序的非递归实现等。
307 9
|
3月前
|
存储 算法
非递归实现后序遍历时,如何避免栈溢出?
后序遍历的递归实现和非递归实现各有优缺点,在实际应用中需要根据具体的问题需求、二叉树的特点以及性能和空间的限制等因素来选择合适的实现方式。
48 1
|
23天前
|
存储 C语言 C++
【C++数据结构——栈与队列】顺序栈的基本运算(头歌实践教学平台习题)【合集】
本关任务:编写一个程序实现顺序栈的基本运算。开始你的任务吧,祝你成功!​ 相关知识 初始化栈 销毁栈 判断栈是否为空 进栈 出栈 取栈顶元素 1.初始化栈 概念:初始化栈是为栈的使用做准备,包括分配内存空间(如果是动态分配)和设置栈的初始状态。栈有顺序栈和链式栈两种常见形式。对于顺序栈,通常需要定义一个数组来存储栈元素,并设置一个变量来记录栈顶位置;对于链式栈,需要定义节点结构,包含数据域和指针域,同时初始化栈顶指针。 示例(顺序栈): 以下是一个简单的顺序栈初始化示例,假设用C语言实现,栈中存储
134 77

热门文章

最新文章