技術(shù)
導(dǎo)讀:數(shù)據(jù)治理的價(jià)值,指對(duì)企業(yè)和整個(gè)數(shù)據(jù)管理的價(jià)值。所有市場(chǎng)都要求數(shù)據(jù)治理變得比以往任何時(shí)候都靈活易變,以適應(yīng)更多需求的出現(xiàn)。很多企業(yè)組織正在認(rèn)識(shí)到,嘗試完全預(yù)先確定每一種可能的數(shù)據(jù)治理突發(fā)事件并為此做好相應(yīng)準(zhǔn)備是很困難的。
數(shù)據(jù)治理的價(jià)值,指對(duì)企業(yè)和整個(gè)數(shù)據(jù)管理的價(jià)值。所有市場(chǎng)都要求數(shù)據(jù)治理變得比以往任何時(shí)候都靈活易變,以適應(yīng)更多需求的出現(xiàn)。很多企業(yè)組織正在認(rèn)識(shí)到,嘗試完全預(yù)先確定每一種可能的數(shù)據(jù)治理突發(fā)事件并為此做好相應(yīng)準(zhǔn)備是很困難的。
2023 Trends in Data Governance
數(shù)據(jù)治理的價(jià)值,指對(duì)企業(yè)和整個(gè)數(shù)據(jù)管理的價(jià)值。2023年,將體現(xiàn)在塑造該學(xué)科的兩個(gè)最明顯的趨勢(shì)中。
首先,這個(gè)術(shù)語(yǔ)已經(jīng)被專門從事訪問(wèn)管理、數(shù)據(jù)控制和企業(yè)安全內(nèi)部方面的供應(yīng)商所使用。這些供應(yīng)商專注于法規(guī)遵從性、數(shù)據(jù)隱私和數(shù)據(jù)保護(hù)——在如今高度監(jiān)管的環(huán)境中,這些已經(jīng)迅速成為決定當(dāng)代企業(yè)成敗的因素。
其次,這個(gè)趨勢(shì)體現(xiàn)出數(shù)據(jù)治理對(duì)越來(lái)越多的環(huán)境、用例和市場(chǎng)條件的實(shí)時(shí)適用性,所有市場(chǎng)都要求數(shù)據(jù)治理變得比以往任何時(shí)候都靈活易變,以適應(yīng)更多需求的出現(xiàn)。很多企業(yè)組織正在認(rèn)識(shí)到,嘗試完全預(yù)先確定每一種可能的數(shù)據(jù)治理突發(fā)事件并為此做好相應(yīng)準(zhǔn)備是很困難的。
相反,他們現(xiàn)在試圖調(diào)整數(shù)據(jù)治理結(jié)構(gòu),以便在發(fā)生這種情況時(shí)能夠動(dòng)態(tài)地進(jìn)行調(diào)整。
TopQuadrant首席技術(shù)官Ralph Hodgson表示:“知道可能發(fā)生什么(通常數(shù)據(jù)治理就是要表達(dá)這一點(diǎn))、已經(jīng)發(fā)生了什么和正在發(fā)生什么是有區(qū)別的。在數(shù)據(jù)治理的操作方面,正在發(fā)生的是一個(gè)非常難以解決的問(wèn)題。如果面對(duì)一家企業(yè)的【數(shù)字孿生應(yīng)用】,那就是‘正在發(fā)生的事情’數(shù)據(jù)治理理念的未來(lái)。”
盡管數(shù)字孿生還沒(méi)有普及到整個(gè)數(shù)據(jù)領(lǐng)域,但是數(shù)據(jù)治理的許多基本方面——當(dāng)通過(guò)實(shí)時(shí)訪問(wèn)控制和情景適應(yīng)性的鏡頭應(yīng)用時(shí)——可以模擬它們?cè)敿?xì)描述當(dāng)前發(fā)生的事情的能力。
這只是一個(gè)從知識(shí)到控制和利用知識(shí)以實(shí)現(xiàn)治理目標(biāo)的邏輯過(guò)程。
管理元數(shù)據(jù)
元數(shù)據(jù)管理很可能一直是數(shù)據(jù)治理的核心。組織可以從許多旨在優(yōu)化這一任務(wù)的工具中進(jìn)行選擇。目前有大量的數(shù)據(jù)目錄、主數(shù)據(jù)管理工具,以及Privacera首席執(zhí)行官所稱的“敏感數(shù)據(jù)目錄”,可以通過(guò)各種元數(shù)據(jù)模型實(shí)現(xiàn)數(shù)據(jù)發(fā)現(xiàn)和分類的自動(dòng)化。根據(jù)Hodgson的說(shuō)法,有六種基本形式的元數(shù)據(jù)與數(shù)據(jù)治理的突出領(lǐng)域接壤,包括:
數(shù)據(jù)表達(dá):該維度涉及“數(shù)據(jù)如何表達(dá);什么數(shù)據(jù)類型;什么數(shù)據(jù)表達(dá)式;它是可以量化的嗎?它是否有測(cè)量單位等等。
數(shù)據(jù)質(zhì)量:高質(zhì)量的數(shù)據(jù)對(duì)于信任數(shù)據(jù)和鼓勵(lì)業(yè)務(wù)采用這些數(shù)據(jù)是不可或缺的。
用法:該區(qū)域處理數(shù)據(jù)的重要性、數(shù)據(jù)安全性和數(shù)據(jù)機(jī)密性。
數(shù)據(jù)管理:數(shù)據(jù)管理需要“所有權(quán)、指標(biāo)和可訪問(wèn)性”。
法規(guī)遵從性:關(guān)于法規(guī)遵從性的元數(shù)據(jù)通常為策略和標(biāo)準(zhǔn)提供信息。
數(shù)據(jù)來(lái)源:數(shù)據(jù)沿襲或數(shù)據(jù)來(lái)源表示數(shù)據(jù)的起源和企業(yè)旅程。
根據(jù)Gartner的說(shuō)法,元數(shù)據(jù)已經(jīng)從被動(dòng)變?yōu)橹鲃?dòng),為實(shí)時(shí)用例提供信息,比如數(shù)據(jù)結(jié)構(gòu)的數(shù)據(jù)集成。因此,所描述的元數(shù)據(jù)(以及伴隨的數(shù)據(jù)治理結(jié)構(gòu))關(guān)鍵的方面是,具備表達(dá)事物之間關(guān)系的共同需求,清楚地了解這些數(shù)據(jù)治理領(lǐng)域中的元素如何相互關(guān)聯(lián),使組織能夠調(diào)整它們以滿足新的需求、數(shù)據(jù)源或用例。
數(shù)據(jù)模型
Hodgson所說(shuō)的“元關(guān)系”是動(dòng)態(tài)修改數(shù)據(jù)治理組件以滿足新興環(huán)境和業(yè)務(wù)條件的必要條件。概念性數(shù)據(jù)模型包括這些關(guān)系、它們的定義和消除它們歧義的語(yǔ)義(如果必要的話)——在部門或應(yīng)用程序之間。這樣的數(shù)據(jù)模型有助于與數(shù)據(jù)治理相關(guān)的一切,從呈現(xiàn)數(shù)據(jù)訪問(wèn)控制到促進(jìn)生命周期管理必需品(如保留策略)。定義良好的概念數(shù)據(jù)模型可能是調(diào)整數(shù)據(jù)治理協(xié)議以滿足不斷出現(xiàn)的情況的起點(diǎn)。為此,這樣的模型由特定的領(lǐng)域(模型是關(guān)于什么的)和規(guī)程組成。
其他維度包括企業(yè)對(duì)主題的觀點(diǎn)、模型的專一程度、它的方面和時(shí)間信息。用必需的數(shù)據(jù)標(biāo)識(shí)符、術(shù)語(yǔ)系統(tǒng)和模式指定模型的這些元素,可以很容易地將它們組合起來(lái)進(jìn)行部門間的分析,在源系統(tǒng)、客戶360、數(shù)據(jù)隱私需求等之間進(jìn)行分析。TopQuadrant首席執(zhí)行官尼米特?梅塔闡述了一個(gè)用例,在這個(gè)用例中,機(jī)構(gòu)致力于野火預(yù)防,每個(gè)機(jī)構(gòu)都有自己的術(shù)語(yǔ)。當(dāng)面對(duì)那么多不同的宗教,怎么讓他們都說(shuō)同一種語(yǔ)言?圖表允許你以一種標(biāo)準(zhǔn)驅(qū)動(dòng)的方式,創(chuàng)建一個(gè)元模型,并使那些聯(lián)邦語(yǔ)言學(xué)保持它們的位置?!?/p>
分布式數(shù)據(jù)管理
數(shù)據(jù)環(huán)境的分布及其對(duì)數(shù)據(jù)管理的影響將繼續(xù)是明年數(shù)據(jù)治理領(lǐng)域的首要挑戰(zhàn)。除了云計(jì)算和多云計(jì)算的日益流行之外,數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)網(wǎng)格等體系結(jié)構(gòu)也加劇了這個(gè)問(wèn)題。當(dāng)然,它影響數(shù)據(jù)治理的所有方面,從生命周期管理到元數(shù)據(jù)管理。然而,正如Ganesan正確指出的那樣,“這就是數(shù)據(jù)治理的作用所在:在公司內(nèi)部。他們是如何看待和對(duì)待這些數(shù)據(jù)的?”為此,對(duì)專門用于擴(kuò)展交付受治理數(shù)據(jù)訪問(wèn)能力的解決方案的投資——同時(shí)減少跨源的策略實(shí)施措施的數(shù)量,不太可能在新的一年里減少。
Ganesan指出,實(shí)現(xiàn)這些成果的方式多種多樣,包括“提供一個(gè)可以管理所有平臺(tái)的窗口”。策略減少是通過(guò)基于屬性的訪問(wèn)控制(ABAC)及其相應(yīng)的基于目的的訪問(wèn)控制(PBAC)實(shí)現(xiàn)的,兩者對(duì)于維護(hù)流暢、響應(yīng)性強(qiáng)的數(shù)據(jù)治理都有影響。根據(jù)Immuta首席技術(shù)官Steve Touw的說(shuō)法,“基于數(shù)據(jù)標(biāo)簽標(biāo)記數(shù)據(jù)和推送策略并不是ABAC。這是ABAC的一個(gè)組成部分。ABAC的真正威力在于使訪問(wèn)成為動(dòng)態(tài)的運(yùn)行時(shí)決策,而不是預(yù)先計(jì)算的、基于角色的決策。”PBAC利用這一優(yōu)勢(shì),僅為特定目的(例如處理某個(gè)報(bào)告)授予訪問(wèn)權(quán)。
數(shù)據(jù)隱私和法規(guī)遵從性
ABAC和PBAC都是實(shí)現(xiàn)法規(guī)合規(guī)性的基礎(chǔ),特別是在橫向數(shù)據(jù)隱私要求方面,并向監(jiān)管機(jī)構(gòu)展示這些事實(shí)。“你不僅得到了控制和屏蔽,你還得到了法律監(jiān)督,讓你的用戶同意他們只會(huì)為特定目的使用這些東西,并在他們?cè)L問(wèn)數(shù)據(jù)時(shí)按照該目的行事,”Steve Touw表示。
數(shù)據(jù)來(lái)源支持這個(gè)用例和其他此類用例的法規(guī)遵從性演示,它也普遍適用于數(shù)據(jù)治理的許多方面。生成日志文件,記錄誰(shuí)訪問(wèn)了哪些數(shù)據(jù)、何時(shí)訪問(wèn)了哪些數(shù)據(jù)、使用PBAC和其他方法訪問(wèn)了哪些數(shù)據(jù)、目的是什么。也許,應(yīng)用于法規(guī)遵從性和治理的其他維度的數(shù)據(jù)譜系的更廣泛的分支與它所交付的上下文有關(guān)——這有助于告知修改治理概念以滿足不斷變化的環(huán)境的能力。
數(shù)據(jù)的質(zhì)量
數(shù)據(jù)領(lǐng)域的分布越來(lái)越廣,加上可用的大量非結(jié)構(gòu)化數(shù)據(jù)的種類越來(lái)越多,使得數(shù)據(jù)質(zhì)量成為良好治理數(shù)據(jù)的先決條件。Ganesan表示:治理部分圍繞元數(shù)據(jù)、質(zhì)量和訪問(wèn)部分,以減少用戶查找和使用數(shù)據(jù)的阻力,盡管數(shù)據(jù)質(zhì)量有很多指標(biāo),但最核心的指標(biāo)不可避免地與“完整性、正確性、清晰度、一致性等諸如此類的指標(biāo)”有關(guān)。
與統(tǒng)計(jì)和非統(tǒng)計(jì)人工智能用于發(fā)現(xiàn)和分類數(shù)據(jù)的大量自動(dòng)化類似,也有這樣的機(jī)制來(lái)幫助確定數(shù)據(jù)質(zhì)量存在缺陷的領(lǐng)域,并對(duì)其進(jìn)行糾正。模糊匹配和精確匹配也可以提供這些好處。因此,這種現(xiàn)代數(shù)據(jù)質(zhì)量機(jī)制“在我們可以建議映射到詞匯表的地方使用機(jī)器學(xué)習(xí),然后以詞匯表的形式,例如,可以表達(dá)一致性的規(guī)則,”霍奇森說(shuō)。
態(tài)勢(shì)感知,實(shí)時(shí)響應(yīng)
正如Hodgson之前指出的,理想的數(shù)據(jù)治理是業(yè)務(wù)及其數(shù)據(jù)流程的實(shí)時(shí)模型,以確保后者的長(zhǎng)期價(jià)值,同時(shí)豐富前者。這種范式隱含著修改數(shù)據(jù)模型、權(quán)限、術(shù)語(yǔ)甚至治理策略的能力(如果需要的話),以一種內(nèi)聚的方式提供業(yè)務(wù)價(jià)值,同時(shí)降低風(fēng)險(xiǎn)。動(dòng)態(tài)訪問(wèn)控制功能、活動(dòng)元數(shù)據(jù)和流動(dòng)的分布式數(shù)據(jù)管理可以促進(jìn)這些收獲。
實(shí)現(xiàn)這種可變形式的數(shù)據(jù)治理比人們想象的要快得多。