【51CTO.com原創(chuàng)稿件】近期，一家中立的市場調(diào)查公司TRUE Global Intelligence在Splunk的指導下調(diào)查采訪了來自美國、英國、法國、德國、中國、日本和澳大利亞共7個國家的1300多名跨國企業(yè)的業(yè)務經(jīng)理和IT領導，了解他們所在的企業(yè)機構如何收集、管理并使用數(shù)據(jù)，完成并發(fā)布了《暗數(shù)據(jù)現(xiàn)狀報告》。

本次調(diào)查的受訪者中一半為 IT 崗位，一半為業(yè)務崗位，30% 為高管和高級領導(副總裁/高級副總裁)，30% 為主管級別，40% 為管理人員。研究報告顯示，盡管企業(yè)高管認識到利用所有數(shù)據(jù)的價值，但企業(yè)機構總數(shù)據(jù)的一半以上(55%)是“暗數(shù)據(jù)”，他們忽視了這些有潛在價值的數(shù)據(jù)，并且缺乏資源去充分利用這些數(shù)據(jù)。

[[266122]]

Splunk 中國區(qū)總經(jīng)理嚴立忠分享《暗數(shù)據(jù)現(xiàn)狀報告》

暗數(shù)據(jù)的認知

何謂“暗數(shù)據(jù)”?Splunk公司給出了準確的定義：暗數(shù)據(jù)是整個組織中，由系統(tǒng)、設備和交互生成的所有未知和未開發(fā)的數(shù)據(jù)。Splunk中國區(qū)總經(jīng)理嚴立忠認為：“很多企業(yè)以為自己在用大數(shù)據(jù)，其實是、也不是，他只是把傳統(tǒng)的商業(yè)數(shù)據(jù)再挖掘，但那不是我們目標中的大數(shù)據(jù)，暗數(shù)據(jù)比這個范圍更廣，也更難。”他指出，很多數(shù)據(jù)是企業(yè)不知道也沒有被利用的，這些都屬于暗數(shù)據(jù)。例如，過去銀行的儲蓄部門和信用卡部門通常是分開的，部門之間沒有太多溝通，數(shù)據(jù)也是割裂的，對于信用卡中心來說，傳統(tǒng)銀行的數(shù)據(jù)是沒有被利用的數(shù)據(jù)，也是一種暗數(shù)據(jù)。暗數(shù)據(jù)可能是當前企業(yè)***的未開發(fā)資源。

在大數(shù)據(jù)時代，數(shù)據(jù)是重要的資產(chǎn)，這一點毋庸置疑，在《暗數(shù)據(jù)現(xiàn)狀報告》中也得到了印證：

• 受訪者中有76%認為“擁有最多數(shù)據(jù)的企業(yè)機構將在競爭中獲勝”。
• 82%的受訪者認為，數(shù)據(jù)與企業(yè)機構的成功息息相關，91%的受訪者認為“擁有最多數(shù)據(jù)的企業(yè)機構將在競爭中獲勝”。
• 87%的受訪者認為數(shù)據(jù)在未來十年將變得更有價值。
• 超過半數(shù)(56%)的受訪者承認，“數(shù)據(jù)驅(qū)動”只是自己所在企業(yè)機構的一個空口號。

然而研究結(jié)果表明，盡管數(shù)據(jù)是首要考慮因素，但行動力遠遠沒有跟上：

在接受調(diào)查的國家中，60% 的受訪者稱組織中至少一半的數(shù)據(jù)為暗數(shù)據(jù)。

• 三分之一的受訪者稱，在其組織擁有的數(shù)據(jù)中，暗數(shù)據(jù)的比例達到 75%。
• 只有中國有略高于一半的受訪者表示組織中的暗數(shù)據(jù)低于一半。
• 77% 的受訪者(從全球來看)表示尋找和收集暗數(shù)據(jù)應是重中之重。
• 66%的受訪者認為缺乏高層領導的支持是收集數(shù)據(jù)的一大挑戰(zhàn)。

倍感欣慰的是，中國企業(yè)對暗數(shù)據(jù)的認知超過了全球平均水平，走在了最前面。

鑒別和收回暗數(shù)據(jù)的困難既涉及技術，也涉及組織問題：受訪者表示面對組織中的數(shù)據(jù)倉庫時，他們應接不暇，而且缺乏相關的人才、技能和工具，領導也缺乏興趣、反應遲鈍。數(shù)據(jù)戰(zhàn)略和對暗數(shù)據(jù)的追求不能只是一個“項目”，必須獲得內(nèi)部領導和內(nèi)部人才的推動，并著眼于對所有數(shù)據(jù)的端對端管理。

受訪者認定具有潛力的主要解決方案包括：對更多員工進行數(shù)據(jù)科學和分析培訓，使用新款軟件讓技術能力較弱的雇員也能用它來分析數(shù)據(jù)，以及將數(shù)據(jù)收集功能融入應用和設備開發(fā)中。另外，大部分受訪者也注意到，利用人工智能收集和分析數(shù)據(jù)，對業(yè)務***進行數(shù)據(jù)價值教育，增加數(shù)據(jù)管理資金，聘用更多數(shù)據(jù)專家也頗具潛力。

暗數(shù)據(jù)與人工智能

全球受訪者都認為人工智能通常會增加機會，而不是取代人。盡管調(diào)查顯示，目前很少有企業(yè)機構正在使用人工智能，但大多數(shù)組織都看到了它的巨大潛力。例如，在一系列的用例中——包括運營效率、戰(zhàn)略決策、人力資源和客戶體驗，只有10%到15%的受訪者說他們的組織正在為這些用例部署人工智能，而大約三分之二的人看到了人工智能的潛在價值。

• 82%的受訪者表示人類現(xiàn)在和將來都將處于人工智能的核心地位。
• 大多數(shù)受訪者(71%)看到了使用人工智能分析數(shù)據(jù)的潛力。
• 73%的人認為人工智能可以彌補IT方面的技能差距。
• 82%的受訪者表示，人類永遠是人工智能的核心，72%的人認為人工智能只是解決業(yè)務問題的工具。
• 只有12%的受訪者使用人工智能來指導業(yè)務戰(zhàn)略，61%的受訪者希望他們所在的企業(yè)機構在未來五年內(nèi)以這種方式增加對人工智能的使用。

再來看一下中國受訪者的核心數(shù)據(jù)：

• 96%的中國受訪者認為，人工智能是由數(shù)據(jù)推動的;91%的受訪者認為，無論是現(xiàn)在還是將來，人類都處于人工智能的核心位置。
• 中國是僅有的兩個“絕大多數(shù)受訪者(77%)都聲稱極為或非常了解人工智能”的市場之一。
• 85%的中國受訪者(所有市場中比例***)認為，人工智能可以彌補IT方面的技能差距。

雖然絕大多數(shù)中國受訪者對人工智能表示出了極大的熱情和信心，但他們目前的采用率(20%)僅略高于全球平均水平(16%)。

數(shù)據(jù)技能與領導力的重要性

幾乎所有的受訪者 (99%) 都同意，數(shù)據(jù)技能是未來工作中不可或缺的一部分。如下圖所示，與調(diào)查中的其他問題一樣，對數(shù)據(jù)技能重要性的態(tài)度在各個地區(qū)并不相同，其中中國的態(tài)度最為積極。

• 業(yè)務領導表示，他們恢復暗數(shù)據(jù)的三大障礙中，首當其沖的是數(shù)據(jù)量，其次是缺乏必要的技能和資源。
• 77%的受訪者“非?；驑O其愿意”學習新的數(shù)據(jù)整理技巧。
• 92%的受訪者表示他們“愿意”學習新的數(shù)據(jù)技能，但只有57%的人“極為”或“非常”熱衷于更多地使用數(shù)據(jù)。
• 當被問及如何教育自己和團隊時，超過半數(shù)(53%)的受訪者表示，他們年齡太大，學不了新的數(shù)據(jù)技能。

受訪者表示未來 10 年既具有技術數(shù)據(jù)技能又擁有敏銳業(yè)務嗅覺的雇員將***，其需求遠超只擁有技術數(shù)據(jù)技能或業(yè)務專業(yè)知識的雇員。顯然，未來的工作要求是：具備數(shù)據(jù)素養(yǎng)才能緊隨時代潮流。受訪者預測需求量***也最難招攬的職員是具備技術和業(yè)務技能的人。

從全球來看，73% 的受訪者表示數(shù)據(jù)技能對于他們來說比業(yè)務技能更加難以掌握。大部分人 (69%) 滿足于繼續(xù)干自己當前的工作，即使這意味著他們無法再得到晉升。

與數(shù)據(jù)技能相比，領導力的作用同樣重要。66%的受訪者認為缺乏高層領導的支持是收集數(shù)據(jù)的一大挑戰(zhàn)，約五分之一(21%)的受訪者認為“企業(yè)機構領導對數(shù)據(jù)缺乏興趣”是一大挑戰(zhàn)。此外，大多數(shù)高管表示，他們就快退休了，沒有動力去了解數(shù)據(jù)。

在數(shù)據(jù)驅(qū)動決策的新時代，要對爆炸式增長的暗數(shù)據(jù)進行管理和分析，彌合數(shù)據(jù)技能缺口可能是現(xiàn)在各家組織面臨的最重要的挑戰(zhàn)。

整體而言，調(diào)查發(fā)現(xiàn)中國是在獲得和部署數(shù)據(jù)技能方面***瞻遠矚的國家。而美國的受訪者比其他國家的受訪者更認可數(shù)據(jù)技能未來將對于工作極度或非常重要的觀點。

結(jié)論與建議

經(jīng)過此次調(diào)查可以發(fā)現(xiàn)，數(shù)據(jù)焦慮是全球性的。那么如何應對數(shù)據(jù)焦慮，***限度的挖掘暗數(shù)據(jù)的價值，讓它們?yōu)槠髽I(yè)和組織所用呢?Splunk給出了四點建議：

1、擁抱 AI 和機器學習的變革力量。我們應當掌握這種具有變革潛力的技術群，尋找對于您所在行業(yè)和組織有意義的應用領域。

2、建立數(shù)據(jù)基礎設施和數(shù)據(jù)文化。讓“數(shù)據(jù)驅(qū)動”成為現(xiàn)實，并確保您的數(shù)據(jù)處理方法有助于組織和展現(xiàn)數(shù)據(jù)，讓您更快地挖掘其所有潛力。暗數(shù)據(jù)可向 AI 提供能夠供其分析的、未開發(fā)的龐大信息資源。

3、招聘時尋找您需要的技能組合。這種技能組合不僅包含現(xiàn)今的數(shù)據(jù)技術能力，還有數(shù)據(jù)文化與變革型企業(yè)中需要的好奇心、自我激勵以及合作能力。

4、提供培訓機遇。人才并不多見，企業(yè)應鼓勵現(xiàn)有的工作人員隨著新技術的到來而成長，隨著業(yè)務的轉(zhuǎn)變而轉(zhuǎn)變。

Splunk助力客戶***化數(shù)據(jù)商業(yè)價值

嚴立忠在接受采訪時表示：“相比于那些Hadoop分布式文件管理系統(tǒng)的廠商，雖然同屬大數(shù)據(jù)廠商，但是Splunk與其并不是競爭關系，Splunk沒有競爭對手，都是合作伙伴。”他強調(diào)，Splunk的合作伙伴是基于歷史數(shù)據(jù)的管理層面，通過Hadoop管理數(shù)據(jù)，數(shù)據(jù)輸出給Splunk，是Splunk進行數(shù)據(jù)關聯(lián)分析時的數(shù)據(jù)源，Splunk的強項是實時分析。

與國內(nèi)數(shù)據(jù)中臺或數(shù)據(jù)平臺的叫法類似，Splunk可以接觸所有數(shù)據(jù)，可以為所有的商業(yè)目標服務。其中，所有數(shù)據(jù)是指既可以是Oracle數(shù)據(jù)庫中的數(shù)據(jù)，也可以是Hadoop中的歷史數(shù)據(jù)，既可以是拍攝視頻的單獨數(shù)據(jù)，也可以是物聯(lián)網(wǎng)數(shù)據(jù)，不受數(shù)據(jù)類型、數(shù)量、存儲方式的限制。

如今，很多看似毫無關聯(lián)的數(shù)據(jù)，接入數(shù)據(jù)平臺進行實時分析后，會產(chǎn)生意想不到的關聯(lián)。例如印尼的7-Eleven利用氣象數(shù)據(jù)預熱雨傘的補貨量，而不是根據(jù)貨架上的貨多貨少。

Splunk發(fā)布暗數(shù)據(jù)現(xiàn)狀報告，旨在呼吁全球的組織和企業(yè)，能夠重視暗數(shù)據(jù)的價值，將數(shù)據(jù)驅(qū)動轉(zhuǎn)變?yōu)楝F(xiàn)實。

下載《暗數(shù)據(jù)現(xiàn)狀報告》完整版請訪問：splunk.com/darkdatareport_zh

【51CTO原創(chuàng)稿件，合作站點轉(zhuǎn)載請注明原文作者和出處為51CTO.com】