關(guān)于數(shù)據(jù)治理,你需要知道些什么?
每個(gè)有效的數(shù)據(jù)庫(kù)都需要精心設(shè)計(jì)的模式(Schema),以保持?jǐn)?shù)據(jù)干凈,避免沖突,滿足用戶的各種需求,適應(yīng)未來的擴(kuò)展。同樣,每個(gè)有效的企業(yè)數(shù)據(jù)計(jì)劃都離不開數(shù)據(jù)治理,也就是精心設(shè)計(jì)的政策,以明確職責(zé)、解決不同利益相關(guān)方之間的沖突,提供維護(hù)和擴(kuò)展,保護(hù)敏感信息。
數(shù)據(jù)治理的關(guān)注點(diǎn)通常包括:
- 長(zhǎng)遠(yuǎn)規(guī)劃:識(shí)別戰(zhàn)略需求,尋求管理層對(duì)數(shù)據(jù)計(jì)劃的支持,獲得多年的預(yù)算承諾,除新功能之外還提供維護(hù)和升級(jí)。
- 架構(gòu):預(yù)見并調(diào)和不同企業(yè)部門之間的數(shù)據(jù)策略沖突。
- 職責(zé):明確研發(fā)、運(yùn)營(yíng)、基礎(chǔ)設(shè)施、商業(yè)智能和各條業(yè)務(wù)線等能力領(lǐng)域之間的維護(hù)、更新和擴(kuò)展職責(zé)。
- 數(shù)據(jù)收集:把來自各條業(yè)務(wù)線的數(shù)據(jù)整合進(jìn)公司總體策略,從源頭上確保數(shù)據(jù)干凈。
- 安全和合規(guī):識(shí)別敏感數(shù)據(jù)及其相關(guān)的監(jiān)管和專業(yè)要求,執(zhí)行技術(shù)和管理保障措施。
數(shù)據(jù)管理方面的權(quán)威西米恩·施瓦茨(Simeon Schwarz)分享過一個(gè)思維實(shí)驗(yàn):假設(shè)你正在為某券商創(chuàng)建新的客戶關(guān)系管理(CRM)分析系統(tǒng),你問該系統(tǒng)的各個(gè)利益相關(guān)方,在他們眼中什么是“賬戶”?答案各不相同:
- 營(yíng)銷部:“賬戶是被轉(zhuǎn)化的銷售線索。”
- 財(cái)務(wù)部:“就財(cái)務(wù)報(bào)表而言,賬戶是擁有存款、能和我們交易的客戶。”
- 會(huì)計(jì)部:“賬戶是我們結(jié)算室、賬簿和記錄系統(tǒng)中的記錄條目。”
- 法律部:“賬戶是我們通過和客戶簽署的法律協(xié)議,向客戶提供的結(jié)構(gòu)化產(chǎn)品。”
雖然每個(gè)定義在其利益相關(guān)方的眼中都是正確的,但這些定義可能無法調(diào)和成單一的一個(gè)定義。沒有數(shù)據(jù)治理計(jì)劃,各個(gè)部門的工作流程可能會(huì)以不同的方式來對(duì)待記錄。結(jié)果將是各個(gè)部門的工作流程產(chǎn)生不同版本的真相,具有不同的監(jiān)管和合規(guī)風(fēng)險(xiǎn)。報(bào)告和分析變得不可靠,并使沖突加劇。
營(yíng)銷部通過網(wǎng)頁(yè)表單收集銷售線索,并為每條線索創(chuàng)建一條新的賬戶記錄,但網(wǎng)頁(yè)表單上可能有錯(cuò)字。法律部從頭開始為每份協(xié)議創(chuàng)建一條新的記錄,導(dǎo)致某些數(shù)據(jù)重復(fù),如果其數(shù)據(jù)與包含錯(cuò)字的營(yíng)銷部數(shù)據(jù)產(chǎn)生沖突,那么還需要進(jìn)行清理。
由于可追溯至大型主機(jī)時(shí)代的一個(gè)傳統(tǒng),運(yùn)行整個(gè)系統(tǒng)的硬件設(shè)施也許是由會(huì)計(jì)部管理,而會(huì)計(jì)部可能不想花錢改進(jìn)營(yíng)銷部的數(shù)據(jù)收集系統(tǒng)。營(yíng)銷部的人在策劃宣傳活動(dòng)時(shí),習(xí)慣了直接查看會(huì)計(jì)部數(shù)據(jù)庫(kù)的原始客戶記錄,這會(huì)產(chǎn)生監(jiān)管和安全風(fēng)險(xiǎn)。
數(shù)據(jù)治理計(jì)劃不僅為解決這些問題和預(yù)見新的問題提供了知識(shí)和制度基礎(chǔ),還根據(jù)企業(yè)戰(zhàn)略計(jì)劃的推進(jìn)提供相應(yīng)的擴(kuò)展。
關(guān)鍵的術(shù)語(yǔ)和趨勢(shì)
如今首席數(shù)據(jù)官(CDO)這個(gè)職位越來越流行,其誕生就是為了應(yīng)對(duì)數(shù)據(jù)治理的挑戰(zhàn)。負(fù)責(zé)數(shù)據(jù)治理的CDO加入企業(yè)高管行列,這表明了數(shù)據(jù)在企業(yè)價(jià)值和使命中的重要地位。
行業(yè)組織和供應(yīng)商已經(jīng)開發(fā)出各種各樣的數(shù)據(jù)治理框架,其中最著名的包括開放組群架構(gòu)框架(TOGAF),它以美國(guó)國(guó)防部較早前一個(gè)項(xiàng)目為基礎(chǔ)發(fā)展而來。TOGAF遠(yuǎn)遠(yuǎn)超出了數(shù)據(jù)治理的范疇,但數(shù)據(jù)架構(gòu)是該框架中一個(gè)被人們津津樂道的組成部分。此外還有數(shù)據(jù)治理框架(DGI),它也是從結(jié)構(gòu)化的角度來看待數(shù)據(jù)治理。
除了上述幾種“框架”法以外,有些早期研究項(xiàng)目致力于元數(shù)據(jù)和情境服務(wù)在制定治理政策方面的潛在應(yīng)用,這是從自下而上的角度來處理問題。






























