數(shù)據(jù)是新石油,提煉新石油要遵循四個原則
數(shù)據(jù)是新石油的概念已經(jīng)存在了很長時間。一般來說,這要歸功于數(shù)學(xué)家Clive Humby:
數(shù)據(jù)是新的石油。像石油一樣,數(shù)據(jù)是有價值的,但石油如果沒有經(jīng)過提煉,它就不能真正被使用。它必須被改變成氣體、塑料、化學(xué)品等,以創(chuàng)造一個有價值的實體,推動有利可圖的活動。因此,必須對數(shù)據(jù)進(jìn)行分解、分析,使其具有價值。
數(shù)據(jù)是新的石油,因為數(shù)據(jù)可以被用來獲得洞察。根據(jù)公司的業(yè)務(wù),洞察可以提高客戶留存率、提升銷售、產(chǎn)生新的收入模式、廣告等等。如果數(shù)據(jù)是新的石油,洞察就是新的財富。
由于計算、物聯(lián)網(wǎng)、機器生成的數(shù)據(jù)等方面的進(jìn)步,數(shù)據(jù)量現(xiàn)在正在爆炸式增長。因此,我們被淹沒在數(shù)據(jù)石油中。我們?nèi)绾畏乐故突馂?zāi),或與數(shù)據(jù)有關(guān)的火災(zāi),更準(zhǔn)確地說,如何獲得良好的洞察?
僅僅擁有數(shù)據(jù)是不夠的。我們需要有一個數(shù)據(jù)實踐--一套普遍理解和可持續(xù)執(zhí)行的數(shù)據(jù)管理原則。為了創(chuàng)建一個良好的數(shù)據(jù)實踐并避免發(fā)生與數(shù)據(jù)相關(guān)的火災(zāi),組織應(yīng)該注意以下四個原則:
數(shù)據(jù)來源(我的數(shù)據(jù)是從哪里來的?)
數(shù)據(jù)比比皆是,但質(zhì)量參差不齊。一些數(shù)據(jù)是骯臟的(充滿了錯誤和遺漏)。有些數(shù)據(jù)是完全錯誤的,還有一些是虛構(gòu)的。如果依賴公共領(lǐng)域的數(shù)據(jù),這一點尤其要注意。一些數(shù)據(jù)集包含偏見--如果在人工智能中使用,會給企業(yè)帶來重大風(fēng)險。正如麻省理工學(xué)院最近的一個項目中所概述的,有些只是包含錯誤。要想知道數(shù)據(jù)所產(chǎn)生的洞察是否有價值,甚至是否安全,對數(shù)據(jù)的來源有一個扎實的了解是至關(guān)重要的。
數(shù)據(jù)隱私(我被允許用這些數(shù)據(jù)做什么?)
隨著人工智能變得越來越普遍--城市、州和國家正在實施關(guān)于如何使用消費者信息的新法律,以及消費者在使用其數(shù)據(jù)方面有哪些權(quán)利。主要的例子是美國加州的CCPA和歐盟GDPR中的 “解釋權(quán)”條款。隨著此類法律的增多,人類原始數(shù)據(jù)的用戶需要特別注意如何使用和保護(hù)這些數(shù)據(jù)。
數(shù)據(jù)保護(hù)(如何確保我不會丟失數(shù)據(jù)?)
數(shù)據(jù)隱私是數(shù)據(jù)保護(hù)的一種形式--確保數(shù)據(jù)訪問受到控制以保護(hù)隱私。數(shù)據(jù)保護(hù)的另一個重要方面是確保數(shù)據(jù)對需要它的人來說仍然可用。數(shù)據(jù)對公司越重要,數(shù)據(jù)的丟失對業(yè)務(wù)的影響就越大(比如,皮克斯因數(shù)據(jù)丟失事件而差點失去《玩具總動員2》)。
數(shù)據(jù)準(zhǔn)備(如何從原始數(shù)據(jù)變成有用的數(shù)據(jù)?)
正如前文所述,原始數(shù)據(jù),就像原始石油一樣,并不是非常有用。要想利用數(shù)據(jù)獲得洞察,就需要對其進(jìn)行提煉(當(dāng)以專注于人工智能的方式進(jìn)行時,這一過程被稱為數(shù)據(jù)準(zhǔn)備、數(shù)據(jù)清洗或特征工程)。擁有一個好的(可復(fù)用的)數(shù)據(jù)準(zhǔn)備策略是關(guān)鍵。數(shù)據(jù)準(zhǔn)備可以使從數(shù)據(jù)中產(chǎn)生的洞察力的質(zhì)量或從數(shù)據(jù)中訓(xùn)練的AI的質(zhì)量有明顯的不同。
以上四項原則共同構(gòu)成了一個良好的數(shù)據(jù)實踐的核心:
- 出處。知道你的數(shù)據(jù)從哪里來
- 隱私。知道數(shù)據(jù)來自誰,以及使用數(shù)據(jù)時應(yīng)遵循哪些法律
- 保護(hù)。不要丟失數(shù)據(jù)
- 準(zhǔn)備。知道如何提煉數(shù)據(jù),并記住你是如何提煉數(shù)據(jù)的,以便可以一次又一次地持續(xù)這樣做。
隨著商業(yè)模式的發(fā)展,越來越多的公司可能會發(fā)現(xiàn)數(shù)據(jù)是他們最大的資產(chǎn),上述原則有助于保護(hù)和發(fā)展這一資產(chǎn)。