隨著每家公司，無論大小或行業(yè)，越來越多地由數(shù)據(jù)驅(qū)動，糟糕的數(shù)據(jù)質(zhì)量正成為巨大的威脅，畢竟，基于錯誤數(shù)據(jù)做出的決定可能會產(chǎn)生重大的破壞性影響，那么，在工具比以往任何時候都多的情況下，為什么良好的數(shù)據(jù)質(zhì)量仍然如此難以實現(xiàn)?對于一些人來說，隨著他們使用的數(shù)據(jù)量以及他們的數(shù)據(jù)可以采用的不同形式的復(fù)雜性和數(shù)量的增加，他們甚至可能會覺得數(shù)據(jù)質(zhì)量變得更加難以實現(xiàn)?？紤]到這一點，你如何才能扭轉(zhuǎn)局面，擁有可信賴的高質(zhì)量數(shù)據(jù)，從而做出可靠準(zhǔn)確的業(yè)務(wù)決策?

不良數(shù)據(jù)的4個主要癥狀

要開始糾正數(shù)據(jù)質(zhì)量問題，你需要能夠識別何時使用了錯誤數(shù)據(jù)，有時，這很簡單，對于許多公司來說，如果你在使用錯誤的數(shù)據(jù)，你知道這一點，然而，在其他時候，有一些更微妙的跡象能夠讓糟糕的數(shù)據(jù)質(zhì)量持續(xù)多年，同時慢慢地?fù)p害你對決策的信心。在評估數(shù)據(jù)時，我會尋找表明數(shù)據(jù)質(zhì)量受到影響的四個重要癥狀。

錯誤和不一致：這一癥狀是明確的。當(dāng)你看到錯誤時，你知道你的數(shù)據(jù)質(zhì)量很差，具有沖突或矛盾信息、錯誤(如錯誤的日期或無意義的值)、重復(fù)記錄以及異常高或低值的記錄，這些可能會扭曲分析和報告，并對你的數(shù)據(jù)信心產(chǎn)生負(fù)面影響。

整合多個來源的問題：當(dāng)你需要幫助整合來自多個來源的數(shù)據(jù)時，不連貫的結(jié)果會使你很難從整體上獲得清晰、全面的數(shù)據(jù)視圖，例如，如果數(shù)據(jù)是完整的，并且關(guān)鍵信息包括在數(shù)據(jù)集中，則可以執(zhí)行有意義的分析或回答基本問題，或者，可能不同的數(shù)據(jù)源之間存在差異，并且因為你的集成系統(tǒng)無效，所以不會標(biāo)記存在錯誤和不匹配。

用戶和客戶反饋乏善可陳：有時候，你的數(shù)據(jù)質(zhì)量不佳的主要指標(biāo)是別人的直接反饋，用戶或利益相關(guān)者可能會報告他們正在處理的數(shù)據(jù)存在差異或問題，例如計算不正確或意外結(jié)果，這可能會削弱對決策過程的信任。假設(shè)客戶或客戶抱怨與數(shù)據(jù)相關(guān)的問題或報告或服務(wù)中的差異，在這種情況下，這是另一個有問題的數(shù)據(jù)的強(qiáng)烈信號，也是一個跡象，表明你還需要采取一些損害控制措施來重建這種關(guān)系。

頻繁的數(shù)據(jù)清理：我尋找的最后一個癥狀是頻繁的數(shù)據(jù)清理，公司有時會驚訝地發(fā)現(xiàn)這是一個問題，他們可能認(rèn)為他們的數(shù)據(jù)質(zhì)量很好，正是因為他們非常認(rèn)真地對待數(shù)據(jù)清理。實際上，需要花費大量時間清理數(shù)據(jù)意味著數(shù)據(jù)在傳入時容易出錯，數(shù)據(jù)清理工作一致性的任何下降都意味著這些錯誤可能會通過并開始影響數(shù)據(jù)質(zhì)量。

如何開始實現(xiàn)真正的數(shù)據(jù)質(zhì)量

既然你已經(jīng)認(rèn)識到了一些數(shù)據(jù)質(zhì)量不佳的跡象，是時候找出如何解決這個問題的方法了。一般來說，我建議采取三管齊下的方法來糾正當(dāng)前的數(shù)據(jù)質(zhì)量問題，并確保你長期使用高質(zhì)量的數(shù)據(jù)。

在質(zhì)量檢查時賦予資產(chǎn)權(quán)重：我們擁有的每一項資產(chǎn)都需要進(jìn)行質(zhì)量檢查，但只有部分資產(chǎn)應(yīng)該具有同等的權(quán)重。總體來說，我的平臺質(zhì)量得分是95%。當(dāng)我深入研究時，我發(fā)現(xiàn)在多個職能領(lǐng)域、管理、人力資源和供應(yīng)商方面得分很高，但銷售部門的質(zhì)量得分為60%，這是一個巨大的問題，銷售數(shù)據(jù)不準(zhǔn)確直接影響到公司成功完成交易和創(chuàng)造收入的能力?，F(xiàn)在，想象一下，你看到所有領(lǐng)域的質(zhì)量分?jǐn)?shù)都很高，但人力資源領(lǐng)域的得分為60%，這并不理想，但人力資源的低數(shù)據(jù)質(zhì)量得分并不會像銷售得分低那樣產(chǎn)生廣泛的影響。

我經(jīng)?？吹焦驹谶M(jìn)行數(shù)據(jù)質(zhì)量檢查時不使用權(quán)重，這樣可以最大限度地減少嚴(yán)重問題，而對次要問題給予過高的重要性。通過將不同的資產(chǎn)分類為域和功能域，并為每個域分配權(quán)重，公司可以實施更全面的方法來評估數(shù)據(jù)質(zhì)量，并獲得真正的數(shù)據(jù)質(zhì)量分?jǐn)?shù)。

調(diào)整你的數(shù)據(jù)治理流程：幾乎每家公司都有某種類型的數(shù)據(jù)治理流程，但只有一些公司隨著他們使用的技術(shù)和數(shù)據(jù)的發(fā)展而不斷調(diào)整這些流程。用于數(shù)據(jù)收集、存儲和分析的新工具和平臺正在不斷開發(fā)。隨著新的數(shù)據(jù)源的出現(xiàn)，我們也看到數(shù)據(jù)格式發(fā)生變化，數(shù)據(jù)量增加，我們接收數(shù)據(jù)的速度加快。

嚴(yán)格遵守數(shù)據(jù)治理規(guī)則是不明智的，甚至是不可能的。定期更新數(shù)據(jù)治理流程將確保你的公司與當(dāng)前數(shù)據(jù)格局保持一致，在保持?jǐn)?shù)據(jù)安全性和質(zhì)量的同時適應(yīng)新的數(shù)據(jù)源和技術(shù)。

使用內(nèi)置了數(shù)據(jù)質(zhì)量更好流程的系統(tǒng)：數(shù)據(jù)驅(qū)動的決策依賴于準(zhǔn)確可靠的數(shù)據(jù)。有時，無論投入多少工作，你當(dāng)前的工具生態(tài)系統(tǒng)都無法為你提供此類數(shù)據(jù)，這可能是因為系統(tǒng)缺乏集成，也可能是因為不同工具之間的數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)不同，這些都是必須糾正的基本問題，才能開始提高數(shù)據(jù)質(zhì)量。

幸運的是，你的系統(tǒng)不需要從頭開始。我建議探索使用數(shù)據(jù)產(chǎn)品的可能性，通過實施數(shù)據(jù)質(zhì)量自動化軟件、提供強(qiáng)大的數(shù)據(jù)譜系和建立數(shù)據(jù)治理策略來促進(jìn)信任，這些附加工具充當(dāng)數(shù)據(jù)攝取、統(tǒng)一、結(jié)構(gòu)化、清理、驗證、轉(zhuǎn)換和加載數(shù)據(jù)的單一平臺，這確保了更全面、更準(zhǔn)確的數(shù)據(jù)集，并具有持續(xù)的高數(shù)據(jù)質(zhì)量。

當(dāng)企業(yè)的數(shù)據(jù)出錯時，沒有簡單的方法來指導(dǎo)企業(yè)。隨著數(shù)據(jù)規(guī)模的顯著增長，人們可能會覺得真正的數(shù)據(jù)質(zhì)量幾乎不可能實現(xiàn)，然而，通過意識到劣質(zhì)數(shù)據(jù)的癥狀，企業(yè)可以迅速采取行動并解決更深層次的問題，使它們重新走上高質(zhì)量數(shù)據(jù)的道路，并增強(qiáng)決策信心。