石油也稱黑色金子，開始的時候人們并不知道它的價值，它只是一種粘稠的、深褐色液體，是剛開采出來未經(jīng)提煉或加工的物質。但隨著蒸汽機的發(fā)明，古老的生產(chǎn)工具完全被顛覆，***次工業(yè)革命來了，這種黑色金子真正被人們認識的發(fā)現(xiàn)，并成為推動當今社會的主燃料。

信息社會，數(shù)據(jù)的價值不容置疑，但如何用好這塊數(shù)據(jù)金礦，還有待挖掘。

[[111241]]

拉手網(wǎng)CTO 官沖

2014年，是大數(shù)據(jù)進入落地之年。究竟大數(shù)據(jù)在企業(yè)一線會有怎樣的應用，51CTO記者帶著這樣的疑問采訪了拉手網(wǎng)CTO官沖先生。

大數(shù)據(jù)的處理與挖掘

在大數(shù)據(jù)誕生之前，企業(yè)已經(jīng)在運用商業(yè)智能工具在分析自己的數(shù)據(jù)了。在固定的業(yè)務數(shù)據(jù)模型下，企業(yè)可以根據(jù)一些設定好的數(shù)值范圍進行分析。得到的結果，很大程度上也是真實可靠的。

但對于電商行業(yè)來說，數(shù)據(jù)量呈幾何數(shù)的增長，讓以往的數(shù)據(jù)處理方法顯得捉襟見肘。官沖先生給出了一組數(shù)字。截止2014年，拉手網(wǎng)擁有5000多萬用戶，每天光產(chǎn)生的日志吞吐量就超過了10億的量級。這里面有用戶的訂單，有他們的評論，還有他們對于個性的詮釋。

以前我們沒有如此大量的數(shù)據(jù)進行處理，大家認為增加計算資源就夠了。但現(xiàn)在如此大吞吐量的數(shù)據(jù)，確實對任何一家來說成本都會非常高。而采用分布式計算后，拉手網(wǎng)可以使用PC Server來應對每天產(chǎn)生的海量數(shù)據(jù)，這種成本就要低上很多。

數(shù)據(jù)分析人員的春天

大數(shù)據(jù)時代，數(shù)據(jù)分析人員（或者叫數(shù)據(jù)科學家）將會變得更加稀缺。這部分人是一家企業(yè)的核心技術人員。

在拉手網(wǎng)，有一支20人左右的大數(shù)據(jù)分析團隊。他們中，一半是技術人員出身，對數(shù)據(jù)特別敏感，喜歡分析數(shù)據(jù)。這些人一旦接觸到商業(yè)模型，就能迅速得出分析結果來。而另一半人，則是商業(yè)模型方面的人才，對于顧客心理等商業(yè)內(nèi)容更加熟悉。這兩類人，平時在拉手網(wǎng)是如何協(xié)作的呢？

官沖告訴51CTO記者，平時會讓他們按照各自的強項工作。比如技術人員，會用已有的數(shù)據(jù)形成各種報表，或開發(fā)出各種數(shù)據(jù)決策工具。而商務人員，則會在數(shù)據(jù)的基礎上做一些天馬行空的想象。當他們兩撥人***碰撞到一起，肯定會得出很多有意思的方案。

為了得出這樣的決策方案，數(shù)據(jù)分析人員可以三個月不跟CTO官沖匯報工作。但是一旦方案達成，就必須要有數(shù)據(jù)來說明這么做，我們可以增加多少的銷售額。這是官沖給他的團隊灌輸?shù)囊庾R，這是一個CTO想要得到的東西。

大數(shù)據(jù)的到來，讓企業(yè)擁有了對所有維度數(shù)據(jù)的計算能力。但這些分析出來的東西對你的商業(yè)支撐到底有沒有作用，這個大數(shù)據(jù)還無法判斷?？赡苣惆凑漳硞€數(shù)據(jù)模型，分析出來產(chǎn)品應該是這么回事。但他真的適合這個企業(yè)嗎？官沖認為，還是需要真正懂得商業(yè)規(guī)律的人來做判斷。

大數(shù)據(jù)時代，企業(yè)將會需要越來越多的數(shù)據(jù)分析人員。

行業(yè)大數(shù)據(jù)的安全性

數(shù)據(jù)的安全性和完整性，是企業(yè)核心數(shù)據(jù)必須考慮的要素。拉手網(wǎng)對此按照三個層面來做，***個層面：基礎硬件。在數(shù)據(jù)保存上，實現(xiàn)數(shù)據(jù)的備份，大部分公司都能做到。第二個層面是關鍵數(shù)據(jù)的管理，哪些人能看到這些數(shù)據(jù)。這個層面是公司投入***的一個，在數(shù)據(jù)的管理上，很多數(shù)據(jù)泄密可能是內(nèi)部原因。有一些內(nèi)部的人員看到他不應該看到的數(shù)據(jù)，或者獲得他不應該獲得的數(shù)據(jù)。

第三是在審核上。數(shù)據(jù)審核包括兩個方面，一方面是完整性的審核，還有他的正確不正確，或者說他有沒有被不安全的使用?？赡苡幸粋€數(shù)據(jù)產(chǎn)生了，會有審核的程序先來驗證一下這個數(shù)據(jù)產(chǎn)生正確還是錯誤，是不是應該在這個時候被產(chǎn)生出來。

拉手網(wǎng)對于大數(shù)據(jù)安全，也使用一些常規(guī)手段。比如內(nèi)網(wǎng)外網(wǎng)分離。在內(nèi)部，正在建立一套數(shù)據(jù)管理流程，包括大數(shù)據(jù)的審計。當我們剛發(fā)現(xiàn)一個數(shù)據(jù)被篡改，或者被非法使用的時候，這個審計機制會啟動報警。

后記

對于一家電商網(wǎng)站來說，拉手網(wǎng)需要對用戶進行細分。要知道用戶買了什么，從哪里來，在未來會有怎樣的購物需求。這些東西，對需要電商大數(shù)據(jù)的支持。

無論從數(shù)據(jù)維度上，還是數(shù)據(jù)長度上，都需要拉手網(wǎng)跟蹤更多數(shù)據(jù)，分析更多數(shù)據(jù)，得出更多的營銷方案。在大數(shù)據(jù)時代，數(shù)據(jù)分析顯得尤為重要。