自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

數(shù)據(jù)分析中會常犯哪些錯誤,如何解決?

大數(shù)據(jù) 數(shù)據(jù)分析
經(jīng)典的冰淇凌銷量和游泳溺水人數(shù)成正比的數(shù)據(jù),這并不能說明冰淇凌銷量的增加會導致更多的人溺水,而只能說明二者相關,比如因為天熱所以二者數(shù)量都增加了。這個例子比較明顯,說起來可能會有人覺得怎么會有人犯這樣的錯誤,然而在實際生活、學習、工作中,時不時的就會有人犯這樣的錯誤。

[[187785]]

錯把相關性當成因果性 correlation vs. causation

經(jīng)典的冰淇凌銷量和游泳溺水人數(shù)成正比的數(shù)據(jù),這并不能說明冰淇凌銷量的增加會導致更多的人溺水,而只能說明二者相關,比如因為天熱所以二者數(shù)量都增加了。這個例子比較明顯,說起來可能會有人覺得怎么會有人犯這樣的錯誤,然而在實際生活、學習、工作中,時不時的就會有人犯這樣的錯誤。

舉個栗子

數(shù)據(jù)顯示,當科比出手10-19次時,湖人的勝率是71.5%;當科比出手20-29次時,湖人的勝率驟降到60.8%;而當科比出手30次或者更多時,湖人的勝率只有41.7%。

根據(jù)這組數(shù)據(jù),為了贏球,科比應該少出手?并不一定如此。有可能科比出手少的時候是因為隊友狀態(tài)好,并不需要他出手太多。也有可能是因為球隊早早領先,垃圾時間太多。而出手太多的比賽是因為比賽艱難或者隊友狀態(tài)不好,需要他挺身而出。當然,以上也只是可能之一,具體是什么情況光靠這組數(shù)據(jù)并不能得出任何結(jié)論。

幸存者偏差 survivorship bias

數(shù)據(jù)分析中看到的樣本是“幸存了某些經(jīng)歷”才被觀察到的,進而導致結(jié)論不正確。

比如比爾蓋茨、喬布斯、扎克伯格都沒有念完大學,所以大家都應該退學去創(chuàng)業(yè)。這一結(jié)論的最大問題在于那些退學而又沒有成功的例子,很多時候我們是看不到的。另一方面,他們是因為牛逼才退學,而不是退學才牛逼的,看,相關性/因果性真是限魂不散。

再比如 Uber 發(fā)現(xiàn)新用戶有10塊錢優(yōu)惠券,但是平均評價卻只有3星。相反,第二次再用的時候沒有優(yōu)惠券了,評價卻高達4星半。這說明,不給優(yōu)惠券用戶評價會更高,果然用戶雖然愛用優(yōu)惠券,但內(nèi)心還是覺得便宜沒好東西的?很明顯,幸存者偏差在這個例子里體現(xiàn)在那些打一星二星評價的用戶,之后可能就沒有第二次了。更明顯的,這個例子是我瞎扯的。

樣本跟整體存在著本質(zhì)的不同

以知乎為例,會有種錯覺人人年薪百萬,985/211起,各種GFSBFM,天朝收入水平直逼灣區(qū)碼工。然而一方面這是幸存者偏差,知乎大V們的發(fā)聲更容易被看到(看,幸存者偏差也是陰魂不散)。另一方面,不要小瞧知乎跟天朝網(wǎng)民的差別,以及天朝網(wǎng)民跟天朝老百姓的差別–樣本跟整體的差別。

類似的例子有水木的工作版塊、步行街的收入和華人網(wǎng)站的貧困線。

過于追逐統(tǒng)計上的顯著性 statistical significance

統(tǒng)計101告訴我們,要比較兩組數(shù)是否不同,最基本的一點可以看它們的區(qū)別是不是統(tǒng)計上顯著。比如 Linkedin 又要改版了(我為什么要說又呢),有兩個版本 A 和 B. 灰度測試發(fā)現(xiàn),跟現(xiàn)有版本比起來,A 的日活比現(xiàn)有版本高20%,但是統(tǒng)計不顯著。而 B 的日活跟現(xiàn)有版本雖然只高了3%,但是統(tǒng)計顯著。于是 PM 拿出統(tǒng)計101翻到第二頁說,來,咱們把統(tǒng)計顯著的版本 B 上線吧。苦逼的數(shù)據(jù)科學家 DS 說,等一下!并不是所有時候都選統(tǒng)計顯著的那一個,咱們再看看版本 A 的數(shù)據(jù)吧(具體分析略過一萬字)。

很顯然,這個例子也是我瞎扯的。

不做數(shù)據(jù)可視化,以及更可怕的:做出錯誤或者帶誤導性的數(shù)據(jù)可視化

在趨勢圖中,為了說明增長趨勢多明顯,把Y調(diào)成不從0開始。這樣差距會看起來很大,增長很大,但是如果把Y軸從0開始看的話,會顯得基本沒有差距。

(一下步就是要編排一個 twitter 的例子了23333,因為數(shù)據(jù)分析表明,有 twitter 公司這樣的例子讀起來會更有趣)

數(shù)據(jù)分析提供的結(jié)果和建議不具有可行性

twitter通過分析文本數(shù)據(jù)發(fā)現(xiàn)。。。

算了,我編不出來,由此可見,不具有可行性的結(jié)果雖然是“理論正確‘的分析結(jié)果,然并卵。。。

不做數(shù)據(jù)分析

別笑,據(jù)以前的校內(nèi)后來的人人現(xiàn)在不知道叫什么的 PM 說,這是真的。(開個玩笑,人人的同仁要是介意的話我刪掉)

最后的大招:如何解釋 p-value

具體我就不講了, 講錯了我明天還怎么面對老板和同事啊。

[[187786]]

責任編輯:武曉燕 來源: 36大數(shù)據(jù)
相關推薦

2018-02-27 13:48:01

大數(shù)據(jù)管理者數(shù)據(jù)

2020-03-27 10:28:51

數(shù)據(jù)分析消防安全大數(shù)據(jù)

2016-03-22 15:05:00

定性移動數(shù)據(jù)開源

2014-06-11 09:34:22

vSphere虛擬機

2011-07-22 15:12:12

java

2010-03-24 18:19:42

Nginx php

2017-10-24 05:28:00

數(shù)據(jù)分析大數(shù)據(jù)數(shù)據(jù)

2017-02-23 08:48:03

2017-02-21 15:00:07

數(shù)據(jù)分析技術

2021-11-22 14:57:35

數(shù)據(jù)治理CIO數(shù)字化轉(zhuǎn)型

2019-02-25 11:16:29

Windows 10錯誤distributed

2018-06-14 09:00:00

WordPress瀏覽器Web服務器

2021-01-27 09:18:50

大數(shù)據(jù)數(shù)據(jù)收集大數(shù)據(jù)分析

2022-06-15 15:34:12

數(shù)據(jù)分析分析模型誤區(qū)

2019-08-05 15:07:04

2015-08-25 10:32:07

健康大數(shù)據(jù)

2016-09-16 23:21:51

數(shù)據(jù)分析數(shù)據(jù)建模

2017-07-20 07:30:16

大數(shù)據(jù)數(shù)據(jù)互聯(lián)網(wǎng)

2023-11-03 08:29:55

自動化測試

2022-02-16 10:37:41

數(shù)據(jù)分析思維數(shù)據(jù)分析
點贊
收藏

51CTO技術棧公眾號