自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

數(shù)據(jù)流中的中位數(shù),確實輕敵了

開發(fā) 前端
問題也很簡單,也就是一組數(shù)據(jù),找出它的中位數(shù),然后有所不同的是這組數(shù)據(jù)可能會新增一些其他數(shù)據(jù),也就是要我們自己維護這么一個數(shù)據(jù)結(jié)構(gòu)去盡量高效的完成它。

[[408159]]

本文轉(zhuǎn)載自微信公眾號「bigsai」,作者大賽 。轉(zhuǎn)載本文請聯(lián)系bigsai公眾號。

 前言

大家好,我是bigsai,今天忙到爆炸(暫不透露以后透露),給大家分享一個巧妙的問題,五分鐘掌握。

今天在刷題時候,遇到一個hard問題,也是挺有意思,在劍指offer的第41題和力扣【數(shù)據(jù)流中的中位數(shù)】。

題目描述是這樣的:

中位數(shù)是有序列表中間的數(shù)。如果列表長度是偶數(shù),中位數(shù)則是中間兩個數(shù)的平均值。

例如,

[2,3,4] 的中位數(shù)是 3

[2,3] 的中位數(shù)是 (2 + 3) / 2 = 2.5

設(shè)計一個支持以下兩種操作的數(shù)據(jù)結(jié)構(gòu):

void addNum(int num) - 從數(shù)據(jù)流中添加一個整數(shù)到數(shù)據(jù)結(jié)構(gòu)中。

double findMedian() - 返回目前所有元素的中位數(shù)。

其實問題也很簡單,也就是一組數(shù)據(jù),找出它的中位數(shù),然后有所不同的是這組數(shù)據(jù)可能會新增一些其他數(shù)據(jù),也就是要我們自己維護這么一個數(shù)據(jù)結(jié)構(gòu)去盡量高效的完成它。

我打開這題力扣上的額描述,它好像就在誘惑我,告訴我什么!

然后我就以為真實的數(shù)據(jù)就在這個范圍,然后一頓操作猛如虎,一提交直接GG。不過這個問題是個非常好的問題,等到后面講,仔細先看看!

好了不多說了,我們進入正題,看看這個經(jīng)典問題到底如何分析。

小白級別方法(無腦排序)

這個問題的解決老少皆宜,小白也有小白的方法,題不在難,能過就行(只對小白有效哇)。

一組數(shù)據(jù)存儲,我用數(shù)組、List都可以,而中位數(shù),其實就是中間一個(偶數(shù)兩個均值)數(shù),這個也好辦啊,排序啊!

一個ArrayList()海納百川(不定長數(shù)組可以存儲數(shù)據(jù)),一行Arrays.sort()走天下。用編程語言中已經(jīng)存在的集合和API可以輕松實現(xiàn)!

分析一下這個算法的時間復雜度,每次插入時候需要排序 nlogn,查詢時間近O(1);次數(shù)多的話時間復雜度還是蠻高的。

具體代碼為:

  1. /** initialize your data structure here. */ 
  2. public MedianFinder() { 
  3.  
  4.  
  5. List<Integer>list=new ArrayList<>(); 
  6. public void addNum(int num) { 
  7.     list.add(num); 
  8.     list.sort(null); 
  9. public double findMedian() { 
  10.     if(list.size()%2==1) 
  11.         return list.get(list.size()/2); 
  12.     else { 
  13.         return (double) (list.get((list.size()-1)/2)+list.get(list.size()/2))/2; 
  14.     }  

一看結(jié)果,2000+ms,這也是一種極限了,這種方法僅限于小白,只為求過。

大白級別的方法(插入排序)

大白比小白稍微強一點,比較它大一點嘛,懂得多一點。

大白看到:這個序列剛開始沒有!然后一點一點在原有的基礎(chǔ)上增加長度,如果每次都打亂排序那代價有點高!所以能不能復用上次已經(jīng)排好序的結(jié)果?

這不就插入排序嘛!

每次新來元素相當于插入排序的最后一步使他有序,然后在插入……

這個流程每次插入的時候由兩個部分組成,查找和移動,其中查找花費O(n),插入也是O(n)。時間復雜度依然是O(n)。

可以維護常數(shù)表示數(shù)據(jù)總個數(shù),查找中位數(shù)時候可以直接根據(jù)數(shù)量查找,時間復雜度為O(1).這樣的時間復雜度在插入上優(yōu)化為O(n)相比O(nlogn)有很大的提升。

但是聰明的大白還能發(fā)現(xiàn)一些閃光點,數(shù)組前面有序的,只是插入最后一個元素需要鎖定在有序順序結(jié)構(gòu)中的位置,線性一個個查找太耗時了哇!這明顯就是一個二分應(yīng)用的場景么!可以使用二分法找到插入的位置,然后插入。

二分+插入的時間復雜度是多少呢?

記住,不是O(logn),二分查找每一次的時間復雜度確實是O(logn),但插入操作的時間復雜度依舊是O(n),總的時間復雜度取最高量級 O(logn)+O(n)=O(n)。

所以這里以后如果遇到某個面試官問你:插入排序使用二分查找優(yōu)化時間復雜度是多少?你一定要堅定的回答:是O(n2),從單詞操作來看,雖然查詢變?yōu)镺(logn)但是插入依舊O(n),所以n個數(shù)時間復雜度依舊為O(n2)。

好了既然解釋清楚,一頓操作猛如虎,直接上代碼:

  1. class MedianFinder { 
  2.  
  3.     /** initialize your data structure here. */ 
  4.     public MedianFinder() { 
  5.  
  6.     } 
  7.     int arr[]=new int[50000]; 
  8.     int count=0; 
  9.     public void addNum(int num) { 
  10.         int low=0,high=count-1; 
  11.         while (low <= high) { 
  12.             int mid = (low + high) / 2; 
  13.             int midVal = arr[mid]; 
  14.  
  15.             if (midVal < num) 
  16.                 low = mid + 1; 
  17.             else if (midVal > num) 
  18.                 high = mid-1 ; 
  19.             else  
  20.                 low++; 
  21.         } 
  22.  
  23.         for(int i=count-1;i>=low;i--){ 
  24.             arr[i+1]=arr[i]; 
  25.         } 
  26.         arr[low]=num; 
  27.         count++; 
  28.     } 
  29.     public double findMedian() { 
  30.  
  31.         if(count%2==1) 
  32.             return arr[count/2]; 
  33.         else  
  34.             return (double) (arr[count/2-1]+arr[count/2])/2; 
  35.     } 

提交之后,200+ms,比起前面小白的無腦排序優(yōu)化了很多,但只擊敗了10%用戶,說明方法還是不夠好,還是很白。

大佬的解法(雙堆/優(yōu)先隊列)

這個問題的話其實也能想出來,但是確實除了這個問題沒見到兩個隊這么玩的,也算是打開眼界一回。

在前面,我們講過堆排序 和優(yōu)先隊列的原理 ,里面詳細的講解了 堆這種數(shù)據(jù)結(jié)構(gòu),我們簡單回顧一下堆:

堆是一種完全二叉樹(即最后一層從左向右存在節(jié)點連續(xù)),因為是完全二叉樹我們經(jīng)常用數(shù)組存儲,可以通過二叉樹下標轉(zhuǎn)換很好的鎖定位置進行交換。

堆分為大根堆和小根堆:

如果所有節(jié)點大于孩子節(jié)點值,那么這個堆叫做大根堆,堆的最大值在根節(jié)點。

如果所有節(jié)點小于孩子節(jié)點值,那么這個堆叫做小根堆,堆的最小值在根節(jié)點。

了解完這些基本解決這題就夠了,這里不需要知道堆、優(yōu)先隊列的具體實現(xiàn)。但是堆和優(yōu)先隊列,怎么應(yīng)用到這個中位數(shù)查找呢?

這個就很巧妙了,我們將數(shù)據(jù)等半分到兩個堆中,其中一個是小根堆,一個是大根堆,小根堆存最大的一半數(shù)據(jù),大的中最小的在堆頂;大根堆存最小的一半數(shù)據(jù),小的中最大的在堆頂,中位數(shù)就只可能在兩個堆頂部分產(chǎn)生啦!

但是在具體實現(xiàn)過程中,也有很多需要注意的地方,再添加時候要先判斷和其中一個堆頂比較大小,應(yīng)該加到哪一個堆(優(yōu)先隊列)中,但是添加之后可能數(shù)值一直遞增很大或者數(shù)值一直遞減很小可能造成兩個堆元素數(shù)量不平衡,那么就要將其中少的加到多的中。

這里我在實現(xiàn)的時候約束小根堆的元素個數(shù)等于大根堆個數(shù)(偶數(shù))或者等于大根堆個數(shù)加一(奇數(shù)),在奇數(shù)情況就直接取小根堆頂返回即可。因為Java已經(jīng)實現(xiàn)優(yōu)先隊列,你不需要詳細實現(xiàn)其中細節(jié)(大佬可以試試參考以前我寫的優(yōu)先隊列實現(xiàn))。

分析這個時間復雜度,每個堆插入、刪除的時間復雜度級別是O(log n/2),即使如果面臨元素平衡可能多操作兩次,但是時間復雜度還是O(logn)級別。比起O(n)快了不少,數(shù)據(jù)量越大體現(xiàn)越明顯。

具體代碼為:

  1. class MedianFinder { 
  2.  
  3.     /** initialize your data structure here. */ 
  4.     public MedianFinder() { 
  5.  
  6.     } 
  7.     Queue<Integer>q1=new PriorityQueue<>();//小根堆 放大的數(shù)據(jù) 
  8.     //大根堆 
  9.     Queue<Integer>q2=new PriorityQueue<>(new Comparator<Integer>() { 
  10.         @Override 
  11.         public int compare(Integer o1, Integer o2) { 
  12.             return o2-o1; 
  13.         } 
  14.     }); 
  15.     public void addNum(int num) { 
  16.        if(q1.isEmpty()) 
  17.             q1.add(num); 
  18.         else if(num>q1.peek()){//插入到小根堆 
  19.             q1.add(num); 
  20.            if (q1.size()>q2.size()+1){ 
  21.               q2.add(q1.poll()); 
  22.             } 
  23.         } 
  24.         else{//插入到大根堆 
  25.             q2.add(num); 
  26.             if (q2.size()>q1.size()){ 
  27.             q1.add(q2.poll()); 
  28.             } 
  29.         } 
  30.  
  31.     } 
  32.     public double findMedian() { 
  33.         if(q1.size()==q2.size()) 
  34.             return (double)(q1.peek()+q2.peek())/2; 
  35.         else  
  36.             return q1.peek(); 
  37.     } 

執(zhí)行區(qū)間75ms,比起上一個大白又好很多,這個雙堆,真的太妙了!我也是第一次見。

提升

對于這個問題,還有一些妖魔鬼怪用二叉搜索樹來做,理論上也是可行的,插入效率不一定很穩(wěn)定,查詢效率比較低(二叉樹的中序排序)。

但是文初提到的場景問題還是要仔細思考一下,面試場景很可能會問到:

1.如果數(shù)據(jù)流中所有整數(shù)都在 0 到 100 范圍內(nèi),你將如何優(yōu)化你的算法?

2.如果數(shù)據(jù)流中 99% 的整數(shù)都在 0 到 100 范圍內(nèi),你將如何優(yōu)化你的算法?

對于第一個問題,應(yīng)該用什么方法優(yōu)化呢?

如果還是采用傳統(tǒng)的雙堆,如果數(shù)據(jù)量非常大的情況下,效率肯定還是有優(yōu)化空間,當數(shù)據(jù)比較集中分布的時候,肯定要考慮計數(shù)排序啊!

如果數(shù)據(jù)分布在0-100之間,可以直接開一個101大小的數(shù)組,遇到一個數(shù)就將其對應(yīng)位置值加一,不光0-100 可以這樣,在某個范圍內(nèi)都可以通過移動表示。

然后你找到中位數(shù),只需要枚舉疊加找到中間位置的數(shù)啦。

不過你可以再進行優(yōu)化,將這個計數(shù)排序修改一下,用數(shù)組值表示小于當前位置值的個數(shù)。這樣這個數(shù)組值是連續(xù)遞增的,查找的時候還可以使用二分優(yōu)化。

不過具體實現(xiàn)上,可能還有一些你需要考慮的,分析算法復雜度,每次插入操作,對應(yīng)小標以及之后值都要加一,所以操作次數(shù)不超過50,而查詢操作使用二分法也不超過10次,所以在數(shù)據(jù)比較集中 數(shù)據(jù)個數(shù)很多有大量重復情況,使用計數(shù)排序是非常好的。

另外,如果99%在0-100范圍內(nèi)也很容易哇,就是在前后邊緣特意設(shè)置0和102,超過100的放到102號,小于0的放到0位置,剩下每次來x放x+1位置,因為中位數(shù)肯定出現(xiàn)在0-100所以這個依舊可行!

 

責任編輯:武曉燕 來源: bigsai
相關(guān)推薦

2021-10-27 10:43:36

數(shù)據(jù)流中位數(shù)偶數(shù)

2011-04-14 14:43:38

SSISTransformat

2011-12-14 15:57:13

javanio

2009-07-15 09:06:11

Linux圖形系統(tǒng)X11的CS架構(gòu)

2011-04-19 09:18:02

SSIS數(shù)據(jù)轉(zhuǎn)換

2020-02-06 19:12:36

Java函數(shù)式編程編程語言

2016-11-14 19:01:36

數(shù)據(jù)流聊天系統(tǒng)web

2009-08-19 10:41:12

Java輸入數(shù)據(jù)流

2022-03-18 08:57:17

前端數(shù)據(jù)流選型

2017-11-16 19:26:34

海量數(shù)據(jù)算法計算機

2024-04-18 09:02:11

數(shù)據(jù)流Mixtral混合模型

2012-07-30 08:31:08

Storm數(shù)據(jù)流

2019-12-19 14:38:08

Flink SQL數(shù)據(jù)流Join

2013-10-21 10:58:50

微軟大數(shù)據(jù)SQL Server

2014-02-11 08:51:15

亞馬遜PaaSAppStream

2014-12-02 10:56:47

TCPIP交互數(shù)據(jù)流

2020-08-20 11:24:31

物聯(lián)網(wǎng)數(shù)據(jù)技術(shù)

2023-08-31 16:47:05

反應(yīng)式編程數(shù)據(jù)流

2023-03-17 07:39:54

開源數(shù)據(jù)流技術(shù)

2019-06-18 13:51:08

大數(shù)據(jù)流處理新興市場
點贊
收藏

51CTO技術(shù)棧公眾號