數據是新的石油。
然而，在一個重要的方面，石油與數據不同：石油的價值與市場供求規(guī)律有關，當石油缺乏時，價格就會上漲；與之相反的是，數據每天都變得越來越多，數據越多就越有用，也越值錢。
在過去兩年，現有數據的90%都是新生成的。社交媒體、流媒體、物聯網——隨著我們的聯系越來越緊密，我們創(chuàng)造了更多的數據。
與石油不同，管理數據的最大挑戰(zhàn)不是維持不斷減少的供應。而是如何處理和利用每天生成的2.5萬億字節(jié)的新數據。
大數據帶來了巨大的挑戰(zhàn)
消費者數據具有很高的價值。
新數據創(chuàng)建的龐大規(guī)模帶來了最重大的挑戰(zhàn)，數據量的增加導致了向云計算的轉變。云計算允許科技公司通過購買大量存儲和處理能力來利用規(guī)模經濟，使非科技公司找到比維護自己的服務器更劃算的方法。
現在，云計算公司正在競相滿足客戶的需求。面積超過100萬平方英尺的“巨型數據中心”正在變得越來越普遍。這些建筑不僅占用空間，還需要大量的能量來存儲和處理大規(guī)模的數據。
然而，還有其他挑戰(zhàn)。集中式服務器可能成為黑客攻擊的目標，因為消費者數據具有很高的價值，供應商必須確保數據始終對客戶可用。
外包這些挑戰(zhàn)使數據的最終使用更容易，但云計算供應商無法確保他們存儲的數據是準確的。這個特殊的問題完全取決于數據所有者。
區(qū)塊鏈給大數據帶來了什么
區(qū)塊鏈有望在2030年控制20%的大數據市場。
區(qū)塊鏈技術的幾個特性很好地解決了處理大數據的問題。
首先，區(qū)塊鏈是去中心化的。使用去中心化的網絡來管理數據存儲和處理可能會帶來無限的伸縮性，因為任何具有計算能力的機器都可以為網絡做出貢獻。
去中心化還提供了一層抵御外部攻擊的保護——去中心化網絡需要獲得51%或更多的網絡哈希能力才能被攻擊，這使得它比存儲在中央服務器上的數據更不易受到黑客攻擊。
區(qū)塊鏈還采用一致同意的方法將交易添加到分類賬中。將此應用于數據意味著網絡可以在驗證數據的真實性和來源方面發(fā)揮作用，減少不準確的實例。因為區(qū)塊鏈是不可變的，所以存儲在它上面的數據永遠不能被任何人修改或操作。
最后，大數據使用面臨的最大威脅之一是政府對公民隱私和數據安全的監(jiān)管。區(qū)塊鏈本身并不能克服這一問題，但是部署密鑰加密意味著個人可以更好地控制如何使用他們的數據并將其傳遞給第三方。
這些特點證明了區(qū)塊鏈有望在2030年控制20%的大數據市場的預測是正確的。
將區(qū)塊鏈應用于大數據
數據存儲和處理是當今大數據面臨的兩個最基本的挑戰(zhàn)。
盡管在這一領域仍有大量的開發(fā)工作要做，但一些先行者項目已經在為融合區(qū)塊鏈和大數據的用例方面取得了長足的進展。
A.預測分析
Endor開發(fā)了一個去中心化平臺，利用大數據為其預測分析引擎提供動力——強大的洞察力可以被企業(yè)用來幫助它們獲得競爭對手沒有的優(yōu)勢。
例如，零售商可以預測哪些消費者可能會購買一周前推出的產品，哪些人會轉而購買高級產品，或者哪些消費者最適合購買特定的新產品，該算法將提供所請求的消費者列表，預測他們未來的行為。
Endor協議是基于麻省理工學院對一門叫做“社會物理學”的學科的廣泛研究而開發(fā)的。
“它從大量來源獲取大數據，并利用這些數據創(chuàng)建快速準確的預測，而不需要任何數據科學家或研究分析師的參與。”因此，Endor有潛力為目前被大數據市場排擠的小企業(yè)提供公平的競爭環(huán)境。
B.存儲和處理
數據存儲和處理是當今大數據面臨的兩個最基本的挑戰(zhàn)。
區(qū)塊鏈領域的幾家初創(chuàng)公司正致力于利用世界各地家庭和辦公室中可用的大量空閑計算資源來解決這些挑戰(zhàn)。
例如，Storj提供了一個點對點的文件存儲網絡。通過使用加密技術和分片，用戶可以保證網絡上沒有任何機器可以訪問他們的文件。
Golem提供了一個類似的解決方案，但是用于處理能力。作為一臺去中心化的超級計算機，任何人都可以以比使用AWS等供應商更低的成本出租多余的GPU或CPU電源來執(zhí)行特別計算。
C.去中心化的人工智能
人工智能(AI)算法是數據饑渴型的，需要大量的數據來構建模式和識別算法，為機器的智能提供動力。
SingularityNET旨在為人工智能算法、智能和服務創(chuàng)建一個全球市場。
其原理是通過去中心化的人工智能，所有的學習都在整個去中心化的網絡中共享。這意味著每臺機器或算法都可能訪問網絡中可用的所有數據、信息和智能。人工智能機器第一次可以互相學習，而不是從創(chuàng)造者輸入的單一數據源中學習。
結論
區(qū)塊鏈就是基礎設施。
盡管作為“新石油”的數據是一個糟糕的經濟類比，但它在說明數據如何推動這些用例和新興技術方面確實有一些價值。
