乾貨 | 十大經典排序演算法最強總結(內含程式碼實現)

  • 2019 年 11 月 3 日
  • 筆記

乾貨 | 十大經典排序演算法最強總結(內含程式碼實現)

一、演算法分類

十種常見排序演算法可以分為兩大類:

比較類排序:通過比較來決定元素間的相對次序,由於其時間複雜度不能突破O(nlogn),因此也稱為非線性時間比較類排序。

非比較類排序:不通過比較來決定元素間的相對次序,它可以突破基於比較排序的時間下界,以線性時間運行,因此也稱為線性時間非比較類排序。

二、演算法複雜度

三、演算法相關概念

穩定:如果a原本在b前面,而a=b,排序之後a仍然在b的前面。

不穩定:如果a原本在b的前面,而a=b,排序之後 a 可能會出現在 b 的後面。

時間複雜度:對排序數據的總的操作次數。反映當n變化時,操作次數呈現什麼規律。

空間複雜度:是指演算法在電腦內執行時所需存儲空間的度量,它也是數據規模n的函數。

四、具體說明

1、冒泡排序

冒泡排序(Bubble Sort)也是一種簡單直觀的排序演算法。它重複地走訪過要排序的數列,一次比較兩個元素,如果他們的順序錯誤就把他們交換過來。走訪數列的工作是重複地進行直到沒有再需要交換,也就是說該數列已經排序完成。這個演算法的名字由來是因為越小的元素會經由交換慢慢“浮”到數列的頂端。

 

作為最簡單的排序演算法之一,冒泡排序給我的感覺就像 Abandon 在單詞書里出現的感覺一樣,每次都在第一頁第一位,所以最熟悉。冒泡排序還有一種優化演算法,就是立一個 flag,當在一趟序列遍歷中元素沒有發生交換,則證明該序列已經有序。但這種改進對於提升性能來說並沒有什麼太大作用。

 

1、演算法步驟

  • 比較相鄰的元素。如果第一個比第二個大,就交換他們兩個。

  • 對每一對相鄰元素作同樣的工作,從開始第一對到結尾的最後一對。這步做完後,最後的元素會是最大的數。

  • 針對所有的元素重複以上的步驟,除了最後一個。

  • 持續每次對越來越少的元素重複上面的步驟,直到沒有任何一對數字需要比較。

 

2、動圖演示

 

3、什麼時候最快

當輸入的數據已經是正序時(都已經是正序了,我還要你冒泡排序有何用啊)。

 

4、什麼時候最慢

當輸入的數據是反序時(寫一個 for 循環反序輸出數據不就行了,幹嘛要用你冒泡排序呢,我是閑的嗎)。

 

5、Java 程式碼實現

public class BubbleSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  for (int i = 1; i < arr.length; i++) {  // 設定一個標記,若為true,則表示此次循環沒有進行交換,也就是待排序列已經有序,排序已經完成。  boolean flag = true;  ​  for (int j = 0; j < arr.length - i; j++) {  if (arr[j] > arr[j + 1]) {  int tmp = arr[j];  arr[j] = arr[j + 1];  arr[j + 1] = tmp;  ​  flag = false;  }  }  ​  if (flag) {  break;  }  }  return arr;  }  }

 

2、選擇排序

選擇排序是一種簡單直觀的排序演算法,無論什麼數據進去都是 O(n²) 的時間複雜度。所以用到它的時候,數據規模越小越好。唯一的好處可能就是不佔用額外的記憶體空間了吧。

 

1、演算法步驟

  • 首先在未排序序列中找到最小(大)元素,存放到排序序列的起始位置

  • 再從剩餘未排序元素中繼續尋找最小(大)元素,然後放到已排序序列的末尾。

  • 重複第二步,直到所有元素均排序完畢。

 

2、動圖演示

 

3、Java 程式碼實現

public class SelectionSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  // 總共要經過 N-1 輪比較  for (int i = 0; i < arr.length - 1; i++) {  int min = i;  ​  // 每輪需要比較的次數 N-i  for (int j = i + 1; j < arr.length; j++) {  if (arr[j] < arr[min]) {  // 記錄目前能找到的最小值元素的下標  min = j;  }  }  ​  // 將找到的最小值和i位置所在的值進行交換  if (i != min) {  int tmp = arr[i];  arr[i] = arr[min];  arr[min] = tmp;  }  ​  }  return arr;  }  }

 

3、插入排序

插入排序的程式碼實現雖然沒有冒泡排序和選擇排序那麼簡單粗暴,但它的原理應該是最容易理解的了,因為只要打過撲克牌的人都應該能夠秒懂。插入排序是一種最簡單直觀的排序演算法,它的工作原理是通過構建有序序列,對於未排序數據,在已排序序列中從後向前掃描,找到相應位置並插入。

插入排序和冒泡排序一樣,也有一種優化演算法,叫做拆半插入。

1、演算法步驟

  • 將第一待排序序列第一個元素看做一個有序序列,把第二個元素到最後一個元素當成是未排序序列。

  • 從頭到尾依次掃描未排序序列,將掃描到的每個元素插入有序序列的適當位置。(如果待插入的元素與有序序列中的某個元素相等,則將待插入元素插入到相等元素的後面。)

 

2. 動圖演示

 

3、Java 程式碼實現

public class InsertSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  // 從下標為1的元素開始選擇合適的位置插入,因為下標為0的只有一個元素,默認是有序的  for (int i = 1; i < arr.length; i++) {  ​  // 記錄要插入的數據  int tmp = arr[i];  ​  // 從已經排序的序列最右邊的開始比較,找到比其小的數  int j = i;  while (j > 0 && tmp < arr[j - 1]) {  arr[j] = arr[j - 1];  j--;  }  ​  // 存在比其小的數,插入  if (j != i) {  arr[j] = tmp;  }  ​  }  return arr;  }  }

 

4、希爾排序

 

希爾排序,也稱遞減增量排序演算法,是插入排序的一種更高效的改進版本。但希爾排序是非穩定排序演算法。

 

希爾排序是基於插入排序的以下兩點性質而提出改進方法的:

  • 插入排序在對幾乎已經排好序的數據操作時,效率高,即可以達到線性排序的效率;

  • 但插入排序一般來說是低效的,因為插入排序每次只能將數據移動一位;

 

希爾排序的基本思想是:先將整個待排序的記錄序列分割成為若干子序列分別進行直接插入排序,待整個序列中的記錄“基本有序”時,再對全體記錄進行依次直接插入排序。

 

1、演算法步驟

  • 選擇一個增量序列 t1,t2,……,tk,其中 ti > tj, tk = 1;

  • 按增量序列個數 k,對序列進行 k 趟排序;

  • 每趟排序,根據對應的增量 ti,將待排序列分割成若干長度為 m 的子序列,分別對各子表進行直接插入排序。僅增量因子為 1 時,整個序列作為一個表來處理,表長度即為整個序列的長度。

 

2、Java 程式碼實現

public class ShellSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  int gap = 1;  while (gap < arr.length) {  gap = gap * 3 + 1;  }  ​  while (gap > 0) {  for (int i = gap; i < arr.length; i++) {  int tmp = arr[i];  int j = i - gap;  while (j >= 0 && arr[j] > tmp) {  arr[j + gap] = arr[j];  j -= gap;  }  arr[j + gap] = tmp;  }  gap = (int) Math.floor(gap / 3);  }  ​  return arr;  }  }

 

5、歸併排序

 

歸併排序(Merge sort)是建立在歸併操作上的一種有效的排序演算法。該演算法是採用分治法(Divide and Conquer)的一個非常典型的應用。

 

作為一種典型的分而治之思想的演算法應用,歸併排序的實現由兩種方法:

  • 自上而下的遞歸(所有遞歸的方法都可以用迭代重寫,所以就有了第 2 種方法);

  • 自下而上的迭代;

 

在《數據結構與演算法 JavaScript 描述》中,作者給出了自下而上的迭代方法。但是對於遞歸法,作者卻認為:

 

However, it is not possible to do so in JavaScript, as the recursion goes too deep for the language to handle.

然而,在 JavaScript 中這種方式不太可行,因為這個演算法的遞歸深度對它來講太深了。

 

說實話,我不太理解這句話。意思是 JavaScript 編譯器記憶體太小,遞歸太深容易造成記憶體溢出嗎?還望有大神能夠指教。

 

和選擇排序一樣,歸併排序的性能不受輸入數據的影響,但表現比選擇排序好的多,因為始終都是 O(nlogn) 的時間複雜度。代價是需要額外的記憶體空間。

 

1、演算法步驟

  • 申請空間,使其大小為兩個已經排序序列之和,該空間用來存放合併後的序列;

  • 設定兩個指針,最初位置分別為兩個已經排序序列的起始位置;

  • 比較兩個指針所指向的元素,選擇相對小的元素放入到合併空間,並移動指針到下一位置;

  • 重複步驟 3 直到某一指針達到序列尾;

  • 將另一序列剩下的所有元素直接複製到合併序列尾。

 

2、動圖演示

 

3、Java 程式碼實現

public class MergeSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  if (arr.length < 2) {  return arr;  }  int middle = (int) Math.floor(arr.length / 2);  ​  int[] left = Arrays.copyOfRange(arr, 0, middle);  int[] right = Arrays.copyOfRange(arr, middle, arr.length);  ​  return merge(sort(left), sort(right));  }  ​  protected int[] merge(int[] left, int[] right) {  int[] result = new int[left.length + right.length];  int i = 0;  while (left.length > 0 && right.length > 0) {  if (left[0] <= right[0]) {  result[i++] = left[0];  left = Arrays.copyOfRange(left, 1, left.length);  } else {  result[i++] = right[0];  right = Arrays.copyOfRange(right, 1, right.length);  }  }  ​  while (left.length > 0) {  result[i++] = left[0];  left = Arrays.copyOfRange(left, 1, left.length);  }  ​  while (right.length > 0) {  result[i++] = right[0];  right = Arrays.copyOfRange(right, 1, right.length);  }  ​  return result;  }  ​  }

 

6、快速排序

 

快速排序是由東尼·霍爾所發展的一種排序演算法。在平均狀況下,排序 n 個項目要 Ο(nlogn) 次比較。在最壞狀況下則需要 Ο(n2) 次比較,但這種狀況並不常見。事實上,快速排序通常明顯比其他 Ο(nlogn) 演算法更快,因為它的內部循環(inner loop)可以在大部分的架構上很有效率地被實現出來。

 

快速排序使用分治法(Divide and conquer)策略來把一個串列(list)分為兩個子串列(sub-lists)。

 

快速排序又是一種分而治之思想在排序演算法上的典型應用。本質上來看,快速排序應該算是在冒泡排序基礎上的遞歸分治法。

 

快速排序的名字起的是簡單粗暴,因為一聽到這個名字你就知道它存在的意義,就是快,而且效率高!它是處理大數據最快的排序演算法之一了。雖然 Worst Case 的時間複雜度達到了 O(n²),但是人家就是優秀,在大多數情況下都比平均時間複雜度為 O(n logn) 的排序演算法表現要更好,可是這是為什麼呢,我也不知道。好在我的強迫症又犯了,查了 N 多資料終於在《演算法藝術與資訊學競賽》上找到了滿意的答案:

 

快速排序的最壞運行情況是 O(n²),比如說順序數列的快排。但它的平攤期望時間是 O(nlogn),且 O(nlogn) 記號中隱含的常數因子很小,比複雜度穩定等於 O(nlogn) 的歸併排序要小很多。所以,對絕大多數順序性較弱的隨機數列而言,快速排序總是優於歸併排序。

 

1、演算法步驟

  • 從數列中挑出一個元素,稱為 “基準”(pivot);

  • 重新排序數列,所有元素比基準值小的擺放在基準前面,所有元素比基準值大的擺在基準的後面(相同的數可以到任一邊)。在這個分區退出之後,該基準就處於數列的中間位置。這個稱為分區(partition)操作;

  • 遞歸地(recursive)把小於基準值元素的子數列和大於基準值元素的子數列排序;

 

遞歸的最底部情形,是數列的大小是零或一,也就是永遠都已經被排序好了。雖然一直遞歸下去,但是這個演算法總會退出,因為在每次的迭代(iteration)中,它至少會把一個元素擺到它最後的位置去。

 

2、動圖演示

 

3、Java 程式碼實現

public class QuickSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  return quickSort(arr, 0, arr.length - 1);  }  ​  private int[] quickSort(int[] arr, int left, int right) {  if (left < right) {  int partitionIndex = partition(arr, left, right);  quickSort(arr, left, partitionIndex - 1);  quickSort(arr, partitionIndex + 1, right);  }  return arr;  }  ​  private int partition(int[] arr, int left, int right) {  // 設定基準值(pivot)  int pivot = left;  int index = pivot + 1;  for (int i = index; i <= right; i++) {  if (arr[i] < arr[pivot]) {  swap(arr, i, index);  index++;  }  }  swap(arr, pivot, index - 1);  return index - 1;  }  ​  private void swap(int[] arr, int i, int j) {  int temp = arr[i];  arr[i] = arr[j];  arr[j] = temp;  }  ​  }

 

7、堆排序

 

堆排序(Heapsort)是指利用堆這種數據結構所設計的一種排序演算法。堆積是一個近似完全二叉樹的結構,並同時滿足堆積的性質:即子結點的鍵值或索引總是小於(或者大於)它的父節點。堆排序可以說是一種利用堆的概念來排序的選擇排序。分為兩種方法:

  • 大頂堆:每個節點的值都大於或等於其子節點的值,在堆排序演算法中用於升序排列;

  • 小頂堆:每個節點的值都小於或等於其子節點的值,在堆排序演算法中用於降序排列;

 

堆排序的平均時間複雜度為 Ο(nlogn)。

 

1、演算法步驟

  • 創建一個堆 H[0……n-1];

  • 把堆首(最大值)和堆尾互換;

  • 把堆的尺寸縮小 1,並調用 shift_down(0),目的是把新的數組頂端數據調整到相應位置;

  • 重複步驟 2,直到堆的尺寸為 1。

 

2、動圖演示

 

3、Java 程式碼實現

public class HeapSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  int len = arr.length;  ​  buildMaxHeap(arr, len);  ​  for (int i = len - 1; i > 0; i--) {  swap(arr, 0, i);  len--;  heapify(arr, 0, len);  }  return arr;  }  ​  private void buildMaxHeap(int[] arr, int len) {  for (int i = (int) Math.floor(len / 2); i >= 0; i--) {  heapify(arr, i, len);  }  }  ​  private void heapify(int[] arr, int i, int len) {  int left = 2 * i + 1;  int right = 2 * i + 2;  int largest = i;  ​  if (left < len && arr[left] > arr[largest]) {  largest = left;  }  ​  if (right < len && arr[right] > arr[largest]) {  largest = right;  }  ​  if (largest != i) {  swap(arr, i, largest);  heapify(arr, largest, len);  }  }  ​  private void swap(int[] arr, int i, int j) {  int temp = arr[i];  arr[i] = arr[j];  arr[j] = temp;  }  ​  } 

 

8、計數排序

 

計數排序的核心在於將輸入的數據值轉化為鍵存儲在額外開闢的數組空間中。作為一種線性時間複雜度的排序,計數排序要求輸入的數據必須是有確定範圍的整數。

 

1、動圖演示

 

2、Java 程式碼實現

 

public class CountingSort implements IArraySort {  ​  @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);  ​  int maxValue = getMaxValue(arr);  ​  return countingSort(arr, maxValue);  }  ​  private int[] countingSort(int[] arr, int maxValue) {  int bucketLen = maxValue + 1;  int[] bucket = new int[bucketLen];  ​  for (int value : arr) {  bucket[value]++;  }  ​  int sortedIndex = 0;  for (int j = 0; j < bucketLen; j++) {  while (bucket[j] > 0) {  arr[sortedIndex++] = j;  bucket[j]--;  }  }  return arr;  }  ​  private int getMaxValue(int[] arr) {  int maxValue = arr[0];  for (int value : arr) {  if (maxValue < value) {  maxValue = value;  }  }  return maxValue;  }  ​  }

 

9、桶排序

 

桶排序是計數排序的升級版。它利用了函數的映射關係,高效與否的關鍵就在於這個映射函數的確定。為了使桶排序更加高效,我們需要做到這兩點:

  1. 在額外空間充足的情況下,盡量增大桶的數量

  2. 使用的映射函數能夠將輸入的 N 個數據均勻的分配到 K 個桶中

 

同時,對於桶中元素的排序,選擇何種比較排序演算法對於性能的影響至關重要。

1、什麼時候最快

當輸入的數據可以均勻的分配到每一個桶中。

2、什麼時候最慢

當輸入的數據被分配到了同一個桶中。

3、Java 程式碼實現

 

public class BucketSort implements IArraySort {    private static final InsertSort insertSort = new InsertSort();    @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);    return bucketSort(arr, 5);  }    private int[] bucketSort(int[] arr, int bucketSize) throws Exception {  if (arr.length == 0) {  return arr;  }    int minValue = arr[0];  int maxValue = arr[0];  for (int value : arr) {  if (value < minValue) {  minValue = value;  } else if (value > maxValue) {  maxValue = value;  }  }    int bucketCount = (int) Math.floor((maxValue - minValue) / bucketSize) + 1;  int[][] buckets = new int[bucketCount][0];    // 利用映射函數將數據分配到各個桶中  for (int i = 0; i < arr.length; i++) {  int index = (int) Math.floor((arr[i] - minValue) / bucketSize);  buckets[index] = arrAppend(buckets[index], arr[i]);  }    int arrIndex = 0;  for (int[] bucket : buckets) {  if (bucket.length <= 0) {  continue;  }  // 對每個桶進行排序,這裡使用了插入排序  bucket = insertSort.sort(bucket);  for (int value : bucket) {  arr[arrIndex++] = value;  }  }    return arr;  }    /**  * 自動擴容,並保存數據  *  * @param arr  * @param value  */  private int[] arrAppend(int[] arr, int value) {  arr = Arrays.copyOf(arr, arr.length + 1);  arr[arr.length - 1] = value;  return arr;  }    }

 

10、基數排序

 

基數排序是一種非比較型整數排序演算法,其原理是將整數按位數切割成不同的數字,然後按每個位數分別比較。由於整數也可以表達字元串(比如名字或日期)和特定格式的浮點數,所以基數排序也不是只能使用於整數。

 

1)基數排序 vs 計數排序 vs 桶排序

基數排序有兩種方法:

這三種排序演算法都利用了桶的概念,但對桶的使用方法上有明顯差異:

  • 基數排序:根據鍵值的每位數字來分配桶;

  • 計數排序:每個桶只存儲單一鍵值;

  • 桶排序:每個桶存儲一定範圍的數值;

 

2)LSD 基數排序動圖演示

 

3、Java 程式碼實現

/**  * 基數排序  * 考慮負數的情況還可以參考: https://code.i-harness.com/zh-CN/q/e98fa9  */  public class RadixSort implements IArraySort {    @Override  public int[] sort(int[] sourceArray) throws Exception {  // 對 arr 進行拷貝,不改變參數內容  int[] arr = Arrays.copyOf(sourceArray, sourceArray.length);    int maxDigit = getMaxDigit(arr);  return radixSort(arr, maxDigit);  }    /**  * 獲取最高位數  */  private int getMaxDigit(int[] arr) {  int maxValue = getMaxValue(arr);  return getNumLenght(maxValue);  }    private int getMaxValue(int[] arr) {  int maxValue = arr[0];  for (int value : arr) {  if (maxValue < value) {  maxValue = value;  }  }  return maxValue;  }    protected int getNumLenght(long num) {  if (num == 0) {  return 1;  }  int lenght = 0;  for (long temp = num; temp != 0; temp /= 10) {  lenght++;  }  return lenght;  }    private int[] radixSort(int[] arr, int maxDigit) {  int mod = 10;  int dev = 1;    for (int i = 0; i < maxDigit; i++, dev *= 10, mod *= 10) {  // 考慮負數的情況,這裡擴展一倍隊列數,其中 [0-9]對應負數,[10-19]對應正數 (bucket + 10)  int[][] counter = new int[mod * 2][0];    for (int j = 0; j < arr.length; j++) {  int bucket = ((arr[j] % mod) / dev) + mod;  counter[bucket] = arrayAppend(counter[bucket], arr[j]);  }    int pos = 0;  for (int[] bucket : counter) {  for (int value : bucket) {  arr[pos++] = value;  }  }  }    return arr;  }    /**  * 自動擴容,並保存數據  *  * @param arr  * @param value  */  private int[] arrayAppend(int[] arr, int value) {  arr = Arrays.copyOf(arr, arr.length + 1);  arr[arr.length - 1] = value;  return arr;  }  }