數(shù)據(jù)遷移是一個(gè)復(fù)雜且通常成本高昂的過(guò)程。企業(yè)將需要正確的方法來(lái)準(zhǔn)確無(wú)誤地遷移數(shù)據(jù)，其中包括深思熟慮的策略和適當(dāng)?shù)墓ぞ摺?/p>

什么是數(shù)據(jù)遷移？

數(shù)據(jù)遷移是指將數(shù)據(jù)從一個(gè)存儲(chǔ)系統(tǒng)傳輸?shù)搅硪粋€(gè)存儲(chǔ)系統(tǒng)的過(guò)程。它從數(shù)據(jù)選擇和準(zhǔn)備開(kāi)始，在此期間進(jìn)行提取和轉(zhuǎn)換。在執(zhí)行這一步驟之后，可以將永久數(shù)據(jù)從舊存儲(chǔ)系統(tǒng)中選擇并加載到適當(dāng)?shù)臄?shù)據(jù)存儲(chǔ)系統(tǒng)中。然后，數(shù)據(jù)遷移將以舊存儲(chǔ)系統(tǒng)的退役而結(jié)束。

數(shù)據(jù)遷移通常屬于以下兩類：

• 云遷移：數(shù)據(jù)或應(yīng)用程序從物理存儲(chǔ)系統(tǒng)遷移到云平臺(tái)或在兩個(gè)云平臺(tái)之間遷移。
• 數(shù)據(jù)中心遷移：數(shù)據(jù)從一個(gè)內(nèi)部部署數(shù)據(jù)中心遷移到另一個(gè)數(shù)據(jù)中心以進(jìn)行升級(jí)或重新定位。

在決定要遷移到哪里之后，接下來(lái)需要確定需要遷移的內(nèi)容：

• 存儲(chǔ)遷移：數(shù)據(jù)從一種物理存儲(chǔ)解決方案移動(dòng)到另一種。
• 數(shù)據(jù)庫(kù)遷移：使用數(shù)據(jù)庫(kù)管理系統(tǒng)移動(dòng)結(jié)構(gòu)化或數(shù)據(jù)庫(kù)管理的數(shù)據(jù)。
• 應(yīng)用程序遷移：數(shù)據(jù)從一個(gè)計(jì)算環(huán)境遷移到另一個(gè)計(jì)算環(huán)境，以支持應(yīng)用程序軟件的變化。
• 業(yè)務(wù)流程遷移：遷移與業(yè)務(wù)流程和指標(biāo)相關(guān)的業(yè)務(wù)應(yīng)用程序和數(shù)據(jù)。

為什么需要數(shù)據(jù)遷移？

企業(yè)選擇升級(jí)其存儲(chǔ)系統(tǒng)并隨之遷移數(shù)據(jù)有幾個(gè)原因，最終幫助他們獲得競(jìng)爭(zhēng)優(yōu)勢(shì)。數(shù)據(jù)庫(kù)遷移可幫助企業(yè)克服存儲(chǔ)限制，并可以促進(jìn)更好的數(shù)據(jù)管理功能和處理速度。另一方面，存儲(chǔ)遷移主要集中在升級(jí)以支持新技術(shù)。

企業(yè)可能會(huì)發(fā)現(xiàn)需要進(jìn)行數(shù)據(jù)遷移的其他場(chǎng)景包括：

• 希望升級(jí)到新的基礎(chǔ)設(shè)施以彌補(bǔ)規(guī)模限制。
• 希望優(yōu)化運(yùn)行數(shù)據(jù)中心的間接成本。
• 需要在采集之后合并新數(shù)據(jù)。
• 需要遷移數(shù)據(jù)中心。
• 希望實(shí)施災(zāi)難恢復(fù)解決方案。
• 希望將應(yīng)用程序遷移到云中，原因包括易于維護(hù)和訪問(wèn)成本。

數(shù)據(jù)遷移的策略

提前制定戰(zhàn)略將幫助企業(yè)節(jié)省成本并防止停機(jī)，以確保業(yè)務(wù)連續(xù)性。企業(yè)必須考慮限制并了解數(shù)據(jù)遷移項(xiàng)目的整體范圍。在啟動(dòng)數(shù)據(jù)遷移項(xiàng)目之前，企業(yè)需要考慮兩個(gè)關(guān)鍵因素，即規(guī)模和時(shí)間。

• 數(shù)據(jù)大?。捍蠖鄶?shù)數(shù)據(jù)集規(guī)模太大而無(wú)法簡(jiǎn)單地上傳到云端，需要在物理設(shè)備上傳送。這主要是因?yàn)樗俣群统杀鞠拗?。企業(yè)可以通過(guò)硬盤(pán)驅(qū)動(dòng)器發(fā)送10TB以下的數(shù)據(jù)，而PB范圍內(nèi)的較大數(shù)據(jù)則需要專門(mén)用于數(shù)據(jù)遷移的設(shè)備。
• 時(shí)間限制：帶寬、網(wǎng)絡(luò)速度和限制以及數(shù)據(jù)集大小是計(jì)算數(shù)據(jù)遷移所需時(shí)間時(shí)的關(guān)鍵考慮因素。如果需要在物理設(shè)備上傳送數(shù)據(jù)，則還應(yīng)考慮其傳輸時(shí)間。

在考慮數(shù)據(jù)大小和時(shí)間限制之后，企業(yè)可以制定項(xiàng)目預(yù)算和時(shí)間表，還需要決定用于數(shù)據(jù)庫(kù)遷移的工具和框架。這將為其概述數(shù)據(jù)遷移的整個(gè)過(guò)程。

此外，企業(yè)還需要決定遷移方法，即在“大爆炸”方法和“一蹴而就”方法之間進(jìn)行選擇;或選擇循序漸進(jìn)的方法，即分階段遷移，其中兩個(gè)系統(tǒng)同時(shí)運(yùn)行。

數(shù)據(jù)遷移的關(guān)鍵步驟

數(shù)據(jù)遷移是企業(yè)將要進(jìn)行的最關(guān)鍵的項(xiàng)目之一，每一步都需要認(rèn)真謹(jǐn)慎。其復(fù)雜性背后的原因是企業(yè)不想損害數(shù)據(jù)質(zhì)量，否則數(shù)據(jù)驅(qū)動(dòng)的業(yè)務(wù)將在核心運(yùn)營(yíng)中出現(xiàn)錯(cuò)誤。

經(jīng)過(guò)規(guī)劃，數(shù)據(jù)遷移大致有五個(gè)階段：

(1)數(shù)據(jù)準(zhǔn)備涉及一些旨在使數(shù)據(jù)適合遷移的關(guān)鍵操作。從審計(jì)開(kāi)始，將運(yùn)行一個(gè)自動(dòng)化流程來(lái)分析數(shù)據(jù)質(zhì)量，并通知不一致、重復(fù)條目或健康狀況不佳的情況。接下來(lái)，備份文件并建立訪問(wèn)級(jí)別。

(2)數(shù)據(jù)映射涉及匹配數(shù)據(jù)源和新目標(biāo)之間的數(shù)據(jù)字段匹配。

(3)執(zhí)行是數(shù)據(jù)被提取、處理和加載到目的地的地方。

(4)在理想情況下，測(cè)試是數(shù)據(jù)遷移中的一個(gè)連續(xù)過(guò)程，尤其是當(dāng)分階段遷移數(shù)據(jù)時(shí)。在整個(gè)遷移過(guò)程完成之后，需要運(yùn)行另一次自動(dòng)化測(cè)試迭代，修復(fù)問(wèn)題并繼續(xù)上線。

(5)有必要在數(shù)據(jù)上線后再次審核，以確保成功完成。企業(yè)還應(yīng)該及時(shí)進(jìn)行審計(jì)并監(jiān)控系統(tǒng)的運(yùn)行狀況。

遷移工具

有許多工具可以幫助企業(yè)完成遷移過(guò)程。許多云計(jì)算提供商提供自己的一套工具。其他工具，包括幾個(gè)免費(fèi)和開(kāi)源應(yīng)用程序，例如Salesforce公司的DataLoader也可用。與遷移類型一樣，遷移工具可以是自腳本、內(nèi)部部署和基于云的。其他主要工具包括亞馬遜的AWS數(shù)據(jù)管道、IBM Informix和Microsoft Azure CosmosDB。

數(shù)據(jù)遷移的挑戰(zhàn)

數(shù)據(jù)遷移本質(zhì)上是復(fù)雜的，在企業(yè)中執(zhí)行這一項(xiàng)目時(shí)可能會(huì)遇到一些挑戰(zhàn)。

• 不包括相關(guān)方可能會(huì)中斷企業(yè)的業(yè)務(wù)活動(dòng)和數(shù)據(jù)遷移過(guò)程。每周讓他們更新進(jìn)度。
• 缺乏數(shù)據(jù)治理或不清楚誰(shuí)可以訪問(wèn)源系統(tǒng)中的數(shù)據(jù)，可能會(huì)造成混亂并影響數(shù)據(jù)質(zhì)量。一個(gè)明確定義的數(shù)據(jù)治理框架對(duì)于克服這一挑戰(zhàn)至關(guān)重要。
• 通用且未經(jīng)證實(shí)的遷移方法可能弊大于利。始終尋找可靠的推薦支持服務(wù)提供商，并選擇經(jīng)驗(yàn)豐富的團(tuán)隊(duì)。
• 技能不足和工具不足都會(huì)導(dǎo)致意外的延遲，并耗費(fèi)寶貴的時(shí)間。進(jìn)行適當(dāng)?shù)难芯浚_保負(fù)責(zé)數(shù)據(jù)遷移的團(tuán)隊(duì)得到充分的培訓(xùn)，并擁有所有必要的工具。
• 計(jì)劃是必不可少的。計(jì)劃本身可能不足以保證成功遷移，但卻是必要的。

準(zhǔn)備好遷移數(shù)據(jù)了嗎？

雖然數(shù)據(jù)遷移聽(tīng)起來(lái)可能不會(huì)太令人生畏，但這是一個(gè)復(fù)雜的過(guò)程，必須事先弄清楚許多變量。因此，企業(yè)需要一個(gè)專門(mén)的團(tuán)隊(duì)來(lái)執(zhí)行和監(jiān)控?cái)?shù)據(jù)遷移過(guò)程，并將其視為一個(gè)重大項(xiàng)目。

企業(yè)還可以利用多個(gè)高級(jí)和開(kāi)源應(yīng)用程序來(lái)幫助進(jìn)行數(shù)據(jù)遷移。與遷移類型一樣，遷移工具可以是自腳本的、內(nèi)部部署的和基于云的，將為企業(yè)提供足夠的靈活性，以最適合的方式進(jìn)行數(shù)據(jù)遷移。

盡管這是一項(xiàng)艱巨的任務(wù)，但只要考慮清楚，就可以毫不猶豫地繼續(xù)進(jìn)行。