如何區(qū)別云數(shù)據(jù)遷移與云數(shù)據(jù)分層

如何區(qū)別云數(shù)據(jù)遷移與云數(shù)據(jù)分層

如何使數(shù)據(jù)存儲(chǔ)現(xiàn)代化,大多數(shù)IT專業(yè)人士可能會(huì)提到云。多年來,云一直是IT戰(zhàn)略的一個(gè)重要組成部分,且未來也會(huì)變得更加重要。Gartner預(yù)測(cè),到2028年,75%的工作負(fù)載將在云中運(yùn)行;而IDC預(yù)測(cè),未來三年云市場(chǎng)的復(fù)合年增長率將接近20%。

從非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的角度來看,遷移到云有可能帶來重大好處。例如,云存儲(chǔ)是無限可擴(kuò)展的。其還可以提高數(shù)據(jù)可用性,并允許組織利用廣泛的云原生服務(wù),包括分析和人工智能。

然而,盡管云技術(shù)的普及程度越來越高,但簡單地將所有本地文件和對(duì)象數(shù)據(jù)遷移到標(biāo)準(zhǔn)云存儲(chǔ)并不理想。現(xiàn)在有如此多的存儲(chǔ)層可用,了解非結(jié)構(gòu)化數(shù)據(jù)遷移和數(shù)據(jù)分層之間的差異,并考慮由分析驅(qū)動(dòng)的混合方法至關(guān)重要。

云數(shù)據(jù)遷移與云數(shù)據(jù)分層

首先,先來了解一下云數(shù)據(jù)遷移和云數(shù)據(jù)文件分層之間的區(qū)別。

云數(shù)據(jù)遷移意味著將當(dāng)前存儲(chǔ)在本地的數(shù)據(jù)轉(zhuǎn)移到云存儲(chǔ)服務(wù),如AmazonEFS或AzureFiles,從而使數(shù)據(jù)能夠從云中立即訪問。云數(shù)據(jù)遷移可能發(fā)生在刷新存儲(chǔ)的時(shí)候,并且是整體遷移到云策略的一部分。將數(shù)據(jù)遷移到云端至少有兩個(gè)目的。一種是利用云文件系統(tǒng)并在云中運(yùn)行應(yīng)用。這提供了與本地存儲(chǔ)相同的基本數(shù)據(jù)性能和可用性,但具有比本地存儲(chǔ)通常提供的更多可擴(kuò)展性的額外好處。此外,使用云存儲(chǔ)的企業(yè)只需為其所消耗的東西付費(fèi),因此,如果以后縮減規(guī)模,就不會(huì)被其購買但不再需要的存儲(chǔ)基礎(chǔ)設(shè)施所困擾。另一個(gè)目的是使用云作為離線存檔,使用低成本的對(duì)象存儲(chǔ),如Amazon的S3Glacier和GlacierInstantRetrieval。

相比之下,云數(shù)據(jù)分層是持續(xù)將數(shù)月未訪問的舊數(shù)據(jù)卸載到云存儲(chǔ)服務(wù)的過程。分層在云中創(chuàng)建了一個(gè)“在線存檔”,其中的文件看起來仍然是本地的,只需雙擊即可訪問。像Amazon的GlacierInstantRetrieval這樣的檔案存儲(chǔ)比標(biāo)準(zhǔn)S3存儲(chǔ)的成本要低得多。由于分層不斷地將舊數(shù)據(jù)遷移到云端,因此減少了需要的昂貴的本地高性能存儲(chǔ)數(shù)量,以及所需的備份存儲(chǔ)數(shù)量,從而將存儲(chǔ)成本降低了70%。

接下來,來看看如何從采取的策略中獲得最大的收益。

制定云數(shù)據(jù)遷移策略

以下是關(guān)鍵考慮因素:

用法:這適用于將本地文件服務(wù)器遷移到云文件服務(wù)器,以及將文件離線歸檔到云對(duì)象存儲(chǔ)。 數(shù)據(jù)的預(yù)評(píng)估:使用分析優(yōu)先的方法確定哪些內(nèi)容應(yīng)該轉(zhuǎn)移到云上,哪些應(yīng)該刪除或存檔,這一點(diǎn)很重要。將降低云成本和遷移時(shí)間,并確保在正確的時(shí)間為正確的數(shù)據(jù)集選擇正確的策略。 環(huán)境和網(wǎng)絡(luò)的預(yù)評(píng)估:由于本地基礎(chǔ)設(shè)施和相關(guān)網(wǎng)絡(luò)設(shè)置中的瓶頸,遷移性能往往極其差。一些遷移解決方案提供了運(yùn)行標(biāo)準(zhǔn)測(cè)試的工具,以識(shí)別環(huán)境中的瓶頸。這可以從根本上提高遷移項(xiàng)目的成功率。 性能:由于廣域網(wǎng)的高延遲,將大量數(shù)據(jù),尤其是大量小文件,遷移到云可能會(huì)非常緩慢,特別是在遷移依賴于SMB等聊天網(wǎng)絡(luò)協(xié)議來傳輸數(shù)據(jù)的情況下。尋找設(shè)計(jì)用于在廣域網(wǎng)上工作,并縮短文件傳輸時(shí)間的解決方案。網(wǎng)絡(luò)帶寬限制和中斷也會(huì)影響數(shù)據(jù)遷移的性能,并且在將數(shù)據(jù)從本地遷移到云的過程中可能會(huì)丟失一些文件屬性或元數(shù)據(jù)。尋找在發(fā)生網(wǎng)絡(luò)問題時(shí)提供重試的解決方案,并執(zhí)行校驗(yàn)和測(cè)試,以確保每個(gè)文件的所有位都已正確傳輸。 安全性:如果通過網(wǎng)絡(luò)遷移數(shù)據(jù),需要確保數(shù)據(jù)在傳輸過程中進(jìn)行加密,以防止竊聽。此外,一旦數(shù)據(jù)在云中,配置正確的訪問控制以防止數(shù)據(jù)泄漏是很重要的。

云分層考慮

以下是分層的關(guān)鍵方面,決定成本節(jié)約的實(shí)現(xiàn)與否:

塊級(jí)分級(jí)與文件級(jí)分級(jí):傳統(tǒng)上,存儲(chǔ)供應(yīng)商提供塊級(jí)分級(jí)。這對(duì)于快照等系統(tǒng)數(shù)據(jù)是理想的,但在遷移常規(guī)用戶和應(yīng)用數(shù)據(jù)時(shí)存在缺點(diǎn)。由于文件是以專有塊的形式存儲(chǔ)的,因此無法從云端進(jìn)行訪問。需要供應(yīng)商銷售的專用軟件。此外,當(dāng)需要替換本地文件系統(tǒng)時(shí),必須重新處理與之關(guān)聯(lián)的所有數(shù)據(jù)。需要在現(xiàn)有的文件服務(wù)器上購買足夠的容量來保存重新處理過的數(shù)據(jù),然后將重新處理過的數(shù)據(jù)遷移到新的文件服務(wù)器。然后,需要將冷數(shù)據(jù)分層回云端。如果有分層的pb級(jí)數(shù)據(jù),這可能會(huì)令人生畏,并且由于出口費(fèi)用和云API成本,這將是昂貴的。相比之下,文件級(jí)分層對(duì)整個(gè)文件進(jìn)行分層,可以從云端本地訪問,用于人工智能和其他云應(yīng)用。在一些非結(jié)構(gòu)化數(shù)據(jù)管理解決方案中,可用的文件級(jí)分層將允許從新的文件服務(wù)器訪問分層的文件,而無需對(duì)所有分層的數(shù)據(jù)進(jìn)行分層。這是一個(gè)不可忽視的巨大優(yōu)勢(shì)。 透明度:分級(jí)應(yīng)該提供透明度,這樣用戶就可以通過簡單地雙擊本地文件服務(wù)器上的文件來訪問其數(shù)據(jù),并將其重定向到分層的位置。透明度允許IT管理員自動(dòng)連續(xù)地對(duì)冷數(shù)據(jù)進(jìn)行分層,而不會(huì)干擾用戶并使其尋找已移動(dòng)的數(shù)據(jù)。仍然能夠從原始文件服務(wù)器搜索和訪問文件,這就是為什么透明分層被稱為創(chuàng)建“在線存檔”的原因。 批量召回:當(dāng)需要時(shí),分層解決方案應(yīng)該允許批量召回?cái)?shù)據(jù)。如果需要對(duì)數(shù)據(jù)已分層的項(xiàng)目進(jìn)行修訂,而不是在需要時(shí)恢復(fù)文件,應(yīng)該能夠提前召回所有文件,以獲得最佳性能。

總結(jié)

如果是想減少本地存儲(chǔ)容量,采用新的存儲(chǔ)技術(shù),并增加對(duì)更靈活、按需的云存儲(chǔ)的投資,那么云數(shù)據(jù)遷移是非常好的選擇。如果是想降低不經(jīng)常訪問的數(shù)據(jù)的存儲(chǔ)成本和容量,但將來可能仍然需要在本地調(diào)用這些數(shù)據(jù),那么數(shù)據(jù)分層是更好的選擇。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2024-05-13
如何區(qū)別云數(shù)據(jù)遷移與云數(shù)據(jù)分層
如何使數(shù)據(jù)存儲(chǔ)現(xiàn)代化,大多數(shù)IT專業(yè)人士可能會(huì)提到云。多年來,云一直是IT戰(zhàn)略的一個(gè)重要組成部分,且未來也會(huì)變得更加重要。

長按掃碼 閱讀全文