當(dāng)各種類型的數(shù)據(jù)開始通過多個數(shù)據(jù)通道實(shí)時大量流入時，數(shù)據(jù)管理業(yè)務(wù)面臨著新的復(fù)雜性。對超高速、大容量、多類型的業(yè)務(wù)數(shù)據(jù)的分析，需要先進(jìn)的數(shù)據(jù)管理技術(shù)和工具的成長和發(fā)展，云計算技術(shù)就是在這種需要下應(yīng)運(yùn)而生的。

然后，在單一、公共或私有云網(wǎng)絡(luò)未能提供預(yù)期的業(yè)務(wù)結(jié)果之后，出現(xiàn)了多云和混合云環(huán)境時代。

數(shù)據(jù)管理通常包括高度復(fù)雜的任務(wù)，例如數(shù)據(jù)存儲、數(shù)據(jù)集成、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全和數(shù)據(jù)庫管理。隨著數(shù)據(jù)速度和數(shù)量的不斷增加、數(shù)據(jù)類型的多樣性以及無限的數(shù)據(jù)通道(傳感器數(shù)據(jù))，數(shù)據(jù)管理很快就會變成一場噩夢，需要有效的技術(shù)解決方案。雪上加霜的是，將數(shù)據(jù)從數(shù)據(jù)存儲傳輸?shù)竭h(yuǎn)程服務(wù)器的問題成為大多數(shù)企業(yè)難以解決的難題。

據(jù)預(yù)測，到 2022 年，基于云的服務(wù)市場將滿足“90% 的組織”。盡管云平臺潛力巨大，但云服務(wù)提供商也面臨不少挑戰(zhàn)。在當(dāng)前數(shù)據(jù)優(yōu)先和人工智能優(yōu)先的時代，實(shí)時數(shù)據(jù)分析主宰著商業(yè)格局，業(yè)務(wù)分析的復(fù)雜挑戰(zhàn)是：

• 孤立的數(shù)據(jù)存儲庫妨礙無縫數(shù)據(jù)集成

• 由于數(shù)據(jù)源、數(shù)據(jù)類型和數(shù)據(jù)量的增加而導(dǎo)致的低質(zhì)量數(shù)據(jù)

• 缺乏合格的數(shù)據(jù)科學(xué)人員

• 缺乏明確定義的數(shù)據(jù)治理 (DG) 政策

因此，企業(yè)已經(jīng)開始尋找能夠解決上述所有挑戰(zhàn)的數(shù)據(jù)管理平臺和工具方面的技術(shù)解決方案。這也轉(zhuǎn)化為全面的數(shù)據(jù)管理戰(zhàn)略，該戰(zhàn)略考慮了未來的數(shù)據(jù)質(zhì)量、數(shù)據(jù)治理和復(fù)雜的云基礎(chǔ)設(shè)施。

編輯搜圖

1. 多云的數(shù)據(jù)治理挑戰(zhàn)

設(shè)想一個業(yè)務(wù)場景，客戶必須管理多個業(yè)務(wù)部門——每個業(yè)務(wù)部門都配備了自己的邊緣計算環(huán)境，由獨(dú)特的云服務(wù)提供商托管和管理。管理這種地理上和運(yùn)營上分散的數(shù)據(jù)可能會造成巨大的數(shù)據(jù)管理故障。 多云的最大好處是靈活性，即在企業(yè)需要的時間和地點(diǎn)提供解決方案的能力。

在混合云基礎(chǔ)架構(gòu)中，資源在本地、私有云和公共云環(huán)境中共享?；旌显浦许樌\(yùn)行的最大障礙是缺乏治理和法規(guī)遵從性。

緩解混合云中數(shù)據(jù)管理的挑戰(zhàn)表明，盡管混合云提供了未來的解決方案，但混合網(wǎng)絡(luò)上的數(shù)據(jù)安全性和合規(guī)性問題是企業(yè)必須準(zhǔn)備應(yīng)對的問題。

然而，在多云環(huán)境或者在混合云中，盡管所有計算資源都分布在廣域網(wǎng)上;資源管理(服務(wù)器)有些分散，對計算服務(wù)的流動產(chǎn)生不利影響。

因此，這些類型的云計算設(shè)置會導(dǎo)致資源管理不一致和錯誤，從而影響整體網(wǎng)絡(luò)性能質(zhì)量。此外，在日益規(guī)范的IT世界中，這些云網(wǎng)絡(luò)現(xiàn)在面臨著嚴(yán)重的合規(guī)性和治理問題。多云世界中數(shù)據(jù)治理的挑戰(zhàn)解釋了企業(yè)可以在多云環(huán)境中采用的一些 DG 最佳實(shí)踐。

2. 云倉庫的數(shù)據(jù)治理挑戰(zhàn)

數(shù)據(jù)倉庫日益增長的重要性在 Mordor Intelligence 報告中得到了回應(yīng)，該報告表明數(shù)據(jù)倉庫市場正以“11.17% 的復(fù)合年增長率從 2019 年的 63 億美元增長到 2025 年的 119.5 億美元”。在云上，數(shù)據(jù)倉庫的開發(fā)進(jìn)一步簡化和加速。但是，數(shù)據(jù)治理和安全性仍然是需要關(guān)注的兩個關(guān)鍵方面。

Privacera 首席執(zhí)行官 Balaji Ganesan表示：

要變得像今天的數(shù)據(jù)環(huán)境那樣去中心化和異構(gòu)，數(shù)據(jù)治理需要集中管理，但需要本地執(zhí)行。這實(shí)際上意味著實(shí)際的執(zhí)行是由盡可能接近數(shù)據(jù)的數(shù)據(jù)庫和應(yīng)用程序完成的，而不是放入另一個層，這會成為單點(diǎn)故障。

3. 分布式云成為最終贏家

為了闡明混合云和分布式云之間的主要區(qū)別，Gartner分析師曾評論：

“混合云的一部分由客戶設(shè)計、擁有、控制和運(yùn)營，另一部分由公共云提供商負(fù)責(zé)?？蛻舯Ａ魧ζ溥\(yùn)營部分的責(zé)任，但無法利用公共云提供商的能力(例如技能、創(chuàng)新速度、投資和技術(shù))。分布式云是下一代云計算，在保留云計算優(yōu)勢的同時擴(kuò)展了云的范圍和用例。首席信息官可以使用分布式云模型來定位未來需要的位置相關(guān)的云用例?！?

那么，什么是分布式云環(huán)境?分布式云促進(jìn)了跨地域的多個公共云網(wǎng)絡(luò)的共存，結(jié)合了本地數(shù)據(jù)中心、遠(yuǎn)程云提供商的網(wǎng)絡(luò)和其他第三方位置。但是，管理是從單點(diǎn)集中控制的。

在分布式云網(wǎng)絡(luò)中，通過提供邊緣計算已經(jīng)很好地解決了這個問題——允許服務(wù)器和應(yīng)用程序在非常接近數(shù)據(jù)位置的地方執(zhí)行，從而將業(yè)務(wù)分析的速度、質(zhì)量和性能提高幾個檔次。更重要的是，隨著先進(jìn)數(shù)據(jù)技術(shù)(如大數(shù)據(jù)、物聯(lián)網(wǎng) (IoT) 和人工智能 (AI)等先進(jìn)數(shù)據(jù)技術(shù)的出現(xiàn)，邊緣計算得到了商業(yè)推動。

邊緣有助于解決以前在多云或混合云中被忽視的合規(guī)性問題。分布式云和邊緣計算共同實(shí)現(xiàn)了在復(fù)雜的多云環(huán)境中所有系統(tǒng)的一致性。

分布式云操作的最大好處是將中央云的功能和服務(wù)擴(kuò)展到遠(yuǎn)程衛(wèi)星網(wǎng)絡(luò)。誰是最大的受益者?當(dāng)然是客戶，客戶現(xiàn)在可以在“單一控制平面”上從他所在的位置管理多個地理上分散的業(yè)務(wù)部門的所有業(yè)務(wù)計算需求。

4. 賦予數(shù)據(jù)消費(fèi)者權(quán)力

在自助數(shù)據(jù)分析時代，“賦能普通企業(yè)消費(fèi)者”是企業(yè)的核心重點(diǎn)。雖然通用數(shù)據(jù)保護(hù)條例 (GDPR) 等數(shù)據(jù)法規(guī)對全球企業(yè)施加了巨大壓力，要求它們進(jìn)行遵守，但是一些新的挑戰(zhàn)，例如企業(yè)數(shù)據(jù)素養(yǎng)推動企業(yè)打破數(shù)據(jù)孤島，轉(zhuǎn)向技術(shù)支持的數(shù)據(jù)共享功能。

5. 展望未來：分布式數(shù)據(jù)管理就是答案

分布式數(shù)據(jù)管理路線圖表明，鑒于企業(yè)中數(shù)據(jù)的指數(shù)級增長，集中的 IT 團(tuán)隊(duì)不可能管理和治理企業(yè)范圍的數(shù)據(jù)。為了確保對其所有用戶的數(shù)據(jù)訪問得到良好管理和監(jiān)管，企業(yè)必須轉(zhuǎn)向分布式數(shù)據(jù)管理模型。

在分布式數(shù)據(jù)管理模型中，數(shù)據(jù)管理角色和職責(zé)在整個企業(yè)中共享。在這個新場景中，分散的專家團(tuán)隊(duì)將“管理數(shù)據(jù)訪問和權(quán)限，同時消除目前集中 IT 存在的瓶頸?！?

實(shí)際的實(shí)施過程可能相對困難，并且可能需要幾年時間才能演變成一個成熟的工作解決方案。未來的數(shù)據(jù)治理平臺將需要綜合規(guī)則用于數(shù)據(jù)處理，其中包括安全性、合規(guī)性以及其他數(shù)據(jù)管理任務(wù)的核心問題。