自動化是解決大數(shù)據(jù)遷移障礙的答案
管理數(shù)以拍字節(jié)計的信息遷移已成為企業(yè)在從非結(jié)構(gòu)化數(shù)據(jù)中提取價值時所必需的實踐。為了通過機(jī)器學(xué)習(xí)和AI獲取見解,企業(yè)正在尋找現(xiàn)代化其數(shù)據(jù)遷移和管理流程的方法,他們需要高效且快速地路由數(shù)據(jù)集,以便為分析提供信息或支持產(chǎn)品開發(fā)。使這一活動變得可管理的關(guān)鍵之一是自動化數(shù)據(jù)遷移任務(wù)。
數(shù)據(jù)管理仍然是企業(yè)面臨的主要挑戰(zhàn)之一。盡管企業(yè)看到了數(shù)據(jù)在實現(xiàn)客戶洞察和參與中的價值,但它們?nèi)栽谂崿F(xiàn)這一目標(biāo)。普華永道對CIO、CTO和技術(shù)領(lǐng)導(dǎo)者的調(diào)查發(fā)現(xiàn),受訪者提到的兩大挑戰(zhàn)是數(shù)據(jù)和當(dāng)前系統(tǒng)及流程的狀態(tài)。雖然幾乎一半的受訪者認(rèn)為數(shù)據(jù)平臺是業(yè)務(wù)增長的關(guān)鍵,但現(xiàn)代化,包括數(shù)據(jù)遷移和管理,仍然是一個難題。
從手動到自動化
現(xiàn)在流動的非結(jié)構(gòu)化數(shù)據(jù)量部分是由于GenAI的結(jié)果,這促使人們對遷移和管理采用新的方法。手動遷移作為傳統(tǒng)方法是一種資源密集且低效的數(shù)據(jù)復(fù)制方式。它需要管理員安排和維護(hù)自定義腳本,以遷移大量數(shù)據(jù)集。將數(shù)據(jù)上傳到云端或本地位置也需要額外的腳本。
手動遷移無法跟上企業(yè)將數(shù)據(jù)遷移到云端以享受實時復(fù)制的時間要求。以1 Gbps的速度遷移1個拍字節(jié)的數(shù)據(jù)可能需要超過100天。在客戶體驗方面,例如,任何企業(yè)都無法承受長時間的等待來獲取可能決定服務(wù)變更、產(chǎn)品定價或促銷活動的客戶數(shù)據(jù)。
除了緩慢遷移帶來的競爭劣勢外,還有數(shù)據(jù)一致性的問題。對于大型數(shù)據(jù)集,在遷移過程中源數(shù)據(jù)的更改是不可避免的。如果沒有能夠在數(shù)據(jù)移動過程中響應(yīng)這些數(shù)據(jù)更改的自動化解決方案,企業(yè)面臨的風(fēng)險是錯誤數(shù)據(jù)到達(dá)云端或本地位置。
手動遷移方法無法支持今天企業(yè)生成的數(shù)據(jù)規(guī)模的復(fù)制。使用自動化方法可以驗證數(shù)據(jù)一致性,這樣無論數(shù)據(jù)發(fā)生了何種更改,使用這些數(shù)據(jù)進(jìn)行分析或其他任務(wù)的人都可以確信他們擁有最新、最準(zhǔn)確的信息。
避免中斷
在大規(guī)模數(shù)據(jù)遷移期間,手動方法還可能導(dǎo)致本地應(yīng)用程序的昂貴中斷。如果涉及更改數(shù)據(jù)集,企業(yè)可能會發(fā)現(xiàn)無法滿足其關(guān)鍵的服務(wù)水平協(xié)議(SLA),如一致性和工作負(fù)載的可用性等標(biāo)準(zhǔn),這將導(dǎo)致員工生產(chǎn)力下降、客戶滿意度降低和幫助臺工單增加。
自動化遷移和數(shù)據(jù)更改可以避免停機(jī),同時確保本地工作負(fù)載的持續(xù)運行、數(shù)據(jù)的一致性以及履行服務(wù)水平協(xié)議(SLA)的能力。
經(jīng)濟(jì)收益
在數(shù)字競爭壓力下,企業(yè)紛紛投資于云服務(wù)提供商、云存儲和現(xiàn)代化數(shù)據(jù)中心。GenAI的出現(xiàn)和大數(shù)據(jù)集的使用,推動了企業(yè)在AI、分析技術(shù)以及相關(guān)技術(shù)和人員上的新投資,以充分利用非結(jié)構(gòu)化數(shù)據(jù)的潛力。企業(yè)無法承受低效且昂貴的方法,例如讓IT人員花費寶貴的時間進(jìn)行手動數(shù)據(jù)遷移。
節(jié)約資源——無論是人力還是財務(wù)資源的一種方法是使用自動化來控制與大數(shù)據(jù)集遷移和復(fù)制相關(guān)的成本,這種方法可以實現(xiàn)大規(guī)模數(shù)據(jù)遷移、無中斷的數(shù)據(jù)更改,并且可以保護(hù)IT預(yù)算以支持新項目。
實現(xiàn)目標(biāo)
正如普華永道的調(diào)查所指出的那樣,從渴望更好地利用數(shù)據(jù)到實現(xiàn)這一目標(biāo)需要進(jìn)行一些組織變革。報告中提到,“對于專注于數(shù)據(jù)現(xiàn)代化的CIO來說,遠(yuǎn)不止于他們實施的技術(shù)。治理、隱私和網(wǎng)絡(luò)安全等基礎(chǔ)性問題對于打破組織孤島并為企業(yè)提供全局的數(shù)據(jù)視角至關(guān)重要?!?/p>
在實施現(xiàn)代化、自動化的數(shù)據(jù)遷移和管理解決方案時,這些組織動態(tài)同樣適用。需要考慮的一些問題包括:
當(dāng)前數(shù)據(jù)系統(tǒng)的狀態(tài)。它們是否已經(jīng)現(xiàn)代化,以支持企業(yè)目前生成的大量數(shù)據(jù)?Hadoop因其支持大數(shù)據(jù)(包括非結(jié)構(gòu)化數(shù)據(jù))的能力而受到歡迎,它通過使任務(wù)在分布式服務(wù)器上進(jìn)行分割和處理來提高處理速度,從而幫助企業(yè)更快地獲得分析結(jié)果,但它可能需要大量的維護(hù)和擴(kuò)展的資本成本。現(xiàn)代數(shù)據(jù)平臺可能提供更好的替代方案。
跨企業(yè)協(xié)作的程度。如果能夠用協(xié)作替代孤立思維,數(shù)據(jù)遷移、AI使用和多團(tuán)隊支持將更為成功,這可能包括CIO、CDO、財務(wù)、技術(shù)和銷售人員,他們可能在預(yù)算優(yōu)先級和哪些數(shù)據(jù)驅(qū)動的開發(fā)項目將帶來最大回報方面存在沖突。
在現(xiàn)代數(shù)據(jù)遷移、GenAI和分析方面投資愿景的清晰度。隨著每天數(shù)拍字節(jié)的數(shù)據(jù)流經(jīng)企業(yè),創(chuàng)建和實現(xiàn)一個清晰的愿景將使數(shù)據(jù)使用成為一個合理的體驗,而不是每日趕進(jìn)度的斗爭,這將有助于通過愿景過濾器評估新出現(xiàn)的機(jī)會。
自動化將使數(shù)據(jù)從云到數(shù)據(jù)中心再回到云端的流動更加高效和一致。通過現(xiàn)代化的數(shù)據(jù)系統(tǒng)、團(tuán)隊對優(yōu)先事項的共識以及整體成就愿景,企業(yè)可以克服數(shù)據(jù)挑戰(zhàn)。