數(shù)據(jù)治理是銀行數(shù)據(jù)建設(shè)必不可少的一個(gè)環(huán)節(jié)。好的數(shù)據(jù)治理體系可以盤活整條數(shù)據(jù)鏈路，最大化保障銀行數(shù)據(jù)的采集、存儲(chǔ)、計(jì)算和使用過程的可控和可追溯。本篇文章，作者介紹了銀行數(shù)據(jù)治理該如何去做，包括數(shù)據(jù)治理有哪些環(huán)節(jié)，又有哪些誤區(qū)，一起來看看吧，希望能夠給你帶來幫助。

數(shù)據(jù)治理的目的是什么？數(shù)據(jù)治理的最終目標(biāo)是提升數(shù)據(jù)的價(jià)值。

數(shù)據(jù)治理是一個(gè)從上到下的工作，資源的調(diào)動(dòng)，制度的設(shè)計(jì)、執(zhí)行、監(jiān)督，最終都要落實(shí)在人上，只有獲得組織內(nèi)部全鏈條的支持，最終才能取得成效。

一、為什么說數(shù)據(jù)治理是臟活累活呢？

數(shù)據(jù)的收集、治理和管理是個(gè)長(zhǎng)期的活，需要的資源多，項(xiàng)目周期長(zhǎng)，不懂的領(lǐng)導(dǎo)不太明白這塊工作的價(jià)值和工作量。

數(shù)據(jù)治理長(zhǎng)期且繁雜，而且大多數(shù)時(shí)候很難看到立竿見影的效果，很多坑容易踩到，一不小心就以失敗告終，所以經(jīng)常被吐槽為“臟活累活”。

吐槽歸吐槽，但數(shù)據(jù)治理的重要性也不可否認(rèn)。做數(shù)據(jù)治理很難，但對(duì)于一些正在數(shù)字化轉(zhuǎn)型道路上邁步前行的銀行來說，這又是一件關(guān)系到發(fā)展戰(zhàn)略的不得不做的基礎(chǔ)工程，銀行早在10年前已經(jīng)開始進(jìn)行數(shù)據(jù)治理，只是大家的治理的水平和階段不一致而已。

1.源數(shù)據(jù)

煙囪式開發(fā)：業(yè)務(wù)繁多、數(shù)據(jù)庫多而亂，系統(tǒng)與系統(tǒng)之間錯(cuò)綜復(fù)雜

數(shù)據(jù)庫種類：架構(gòu)經(jīng)歷多次變遷，切換不完全，需要從Mysql、oracle、hbase甚至excle表中跨庫、跨實(shí)例、跨種類才能獲得有效業(yè)務(wù)數(shù)據(jù)

數(shù)據(jù)結(jié)構(gòu)混亂：同一字段，類型、命名都不一致

文檔缺失：無數(shù)據(jù)庫文檔或文檔陳舊

2.變遷

系統(tǒng)版本升級(jí)：每一次升級(jí)都只是掩蓋之前的錯(cuò)誤，數(shù)據(jù)治理需要從源頭

人員變更：梳理過程中的大部分問題最終答案：“不清楚，原來維護(hù)人已離職”

數(shù)據(jù)流轉(zhuǎn)：數(shù)據(jù)從源頭經(jīng)過很多次不規(guī)范的同步

3.存量

各自為政：各業(yè)務(wù)部門已有自己的統(tǒng)計(jì)邏輯和報(bào)表，同一指標(biāo)匯總維度又不一致，梳理、治理、輸出還要盡量不影響已有報(bào)表結(jié)果

半途而廢：前任都知道數(shù)據(jù)治理、統(tǒng)一出口的重要性，但只完成一部分就放棄了。問題在于“完成的一部分”有人還在用。

二、數(shù)據(jù)治理閉環(huán)

1、組織固定的數(shù)據(jù)治理團(tuán)隊(duì)

行里分管的領(lǐng)導(dǎo)需要組建一支對(duì)數(shù)據(jù)治理有足夠認(rèn)識(shí)、有治理經(jīng)驗(yàn)、熟悉業(yè)務(wù)的團(tuán)隊(duì)，給予團(tuán)隊(duì)有相對(duì)的資源和足夠權(quán)限，得到各部門的全力配合和支持。

2、清楚行內(nèi)數(shù)據(jù)質(zhì)量和任務(wù)

行內(nèi)的數(shù)據(jù)采集情況、數(shù)據(jù)存儲(chǔ)情況，數(shù)據(jù)從分散的系統(tǒng)集中到數(shù)據(jù)倉(cāng)庫。評(píng)估當(dāng)前數(shù)據(jù)質(zhì)量，保證數(shù)據(jù)完整性、準(zhǔn)確性、及時(shí)性、一致性、唯一性，明確數(shù)據(jù)治理的任務(wù)和階段目標(biāo)。

3、規(guī)范治理流程和建立制度

數(shù)據(jù)治理團(tuán)隊(duì)可以選擇從業(yè)務(wù)流程，也就是數(shù)據(jù)產(chǎn)生的源頭開始，對(duì)其進(jìn)行規(guī)范化、流程化、標(biāo)準(zhǔn)化處理，并建立相關(guān)業(yè)務(wù)規(guī)則文檔，保證業(yè)務(wù)部門能夠在人員流動(dòng)中保持?jǐn)?shù)據(jù)治理意識(shí)。

4、確認(rèn)業(yè)務(wù)指標(biāo)，劃分?jǐn)?shù)據(jù)層級(jí)

在數(shù)據(jù)治理工作中，對(duì)數(shù)據(jù)進(jìn)行指標(biāo)、標(biāo)簽分類非常重要，數(shù)據(jù)治理團(tuán)隊(duì)自己要熟悉業(yè)務(wù)和各個(gè)系統(tǒng)，與業(yè)務(wù)部門充分溝通，并要求合作為業(yè)務(wù)數(shù)據(jù)建立對(duì)應(yīng)的指標(biāo)體系，劃分核心數(shù)據(jù)指標(biāo)，進(jìn)行分類分級(jí)。

5、建立平臺(tái)，自動(dòng)化處理機(jī)制

治理過程中需要建立自動(dòng)化治理平臺(tái)，讓業(yè)務(wù)數(shù)據(jù)能夠自動(dòng)傳輸?shù)綄?duì)應(yīng)數(shù)據(jù)倉(cāng)庫中。

6、關(guān)注異常數(shù)據(jù)，完善業(yè)務(wù)系統(tǒng)

數(shù)據(jù)治理團(tuán)隊(duì)建立監(jiān)控預(yù)警機(jī)制，分析數(shù)據(jù)質(zhì)量和異常數(shù)據(jù)，協(xié)調(diào)技術(shù)人員完善業(yè)務(wù)系統(tǒng)。

7、完善業(yè)務(wù)數(shù)據(jù)閉環(huán)

數(shù)據(jù)治理團(tuán)隊(duì)可以對(duì)整個(gè)數(shù)據(jù)治理周期流程進(jìn)行整合，形成一套完整的“業(yè)務(wù)-數(shù)據(jù)-處理-存儲(chǔ)-調(diào)取-利用-分析-可視化-預(yù)警-決策-業(yè)務(wù)”閉環(huán)流程，讓數(shù)據(jù)在過程中不斷優(yōu)化，持續(xù)提高數(shù)據(jù)質(zhì)量。

三、數(shù)據(jù)治理體系

銀行數(shù)據(jù)治理體系包括數(shù)據(jù)質(zhì)量管理、元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)安全及數(shù)據(jù)標(biāo)準(zhǔn)等內(nèi)容。

1、數(shù)據(jù)質(zhì)量

一般采用常用的標(biāo)準(zhǔn)來衡量數(shù)據(jù)質(zhì)量的好壞：完整性、準(zhǔn)確性、一致性和及時(shí)性。

完整性：數(shù)據(jù)的記錄和信息是否完整，是否存在缺失情況。

準(zhǔn)確性：數(shù)據(jù)匯總記錄的信息和數(shù)據(jù)是否準(zhǔn)確，是否存在異?；蛘咤e(cuò)誤。

一致性：多個(gè)業(yè)務(wù)數(shù)倉(cāng)間的公共數(shù)據(jù)，必須在各個(gè)數(shù)據(jù)倉(cāng)庫中保持一致。

及時(shí)性：數(shù)據(jù)能及時(shí)產(chǎn)生和預(yù)警。

2、元數(shù)據(jù)管理

元數(shù)據(jù)是關(guān)于數(shù)據(jù)的組織、數(shù)據(jù)域及其關(guān)系的信息，通俗理解，元數(shù)據(jù)就是描述數(shù)據(jù)的數(shù)據(jù)。

元數(shù)據(jù)包含技術(shù)元數(shù)據(jù)和業(yè)務(wù)元數(shù)據(jù)，讓數(shù)據(jù)分析人員對(duì)銀行的數(shù)據(jù)情況一目了然，數(shù)據(jù)存儲(chǔ)在哪里，如何抽取、清理、維護(hù)這些數(shù)據(jù)，血緣關(guān)系怎么樣。

元數(shù)據(jù)確立數(shù)據(jù)業(yè)務(wù)含義可解釋性。

提升數(shù)據(jù)整合和溯源能力，血緣關(guān)系可維護(hù)性。

建立數(shù)據(jù)質(zhì)量稽核體系，分類管理監(jiān)控。

3、主數(shù)據(jù)管理

銀行的數(shù)據(jù)分為三部分：主數(shù)據(jù)、交易數(shù)據(jù)、指標(biāo)數(shù)據(jù)。其中，主數(shù)據(jù)和交易數(shù)據(jù)合稱為基礎(chǔ)數(shù)據(jù)。主數(shù)據(jù)指銀行內(nèi)一致并共享的業(yè)務(wù)主體，常見的主數(shù)據(jù)比如銀行的員工、客戶數(shù)據(jù)、渠道數(shù)據(jù)、產(chǎn)品數(shù)據(jù)。

主數(shù)據(jù)還包括一些關(guān)系數(shù)據(jù)，它們描述了主數(shù)據(jù)之間的關(guān)系，比如客戶與產(chǎn)品的關(guān)系、產(chǎn)品與地域的關(guān)系、客戶與客戶的關(guān)系、產(chǎn)品與產(chǎn)品的關(guān)系等。

4、數(shù)據(jù)資產(chǎn)管理

數(shù)據(jù)資產(chǎn)管理主要關(guān)心數(shù)據(jù)有沒有被合理利用？如何產(chǎn)生最大價(jià)值？這些都是數(shù)據(jù)資產(chǎn)管理關(guān)心的核心工作，數(shù)據(jù)資產(chǎn)從業(yè)務(wù)角度和技術(shù)角度進(jìn)行合并，輸出統(tǒng)一的數(shù)據(jù)資產(chǎn)分析，向外提供統(tǒng)一的數(shù)據(jù)資產(chǎn)服務(wù)。

如何盤活數(shù)據(jù)，形成數(shù)據(jù)資產(chǎn)，提供完整的數(shù)據(jù)資產(chǎn)全景視圖，讓數(shù)據(jù)管理部門和業(yè)務(wù)部門全局、宏觀地掌控銀行資產(chǎn)動(dòng)態(tài)。

5、數(shù)據(jù)安全

數(shù)據(jù)安全是銀行數(shù)據(jù)建設(shè)必不可少的一環(huán)，我們的數(shù)據(jù)都存儲(chǔ)在服務(wù)器中，需要對(duì)數(shù)據(jù)進(jìn)行核查、敏感字段加密、訪問權(quán)限控制，確保數(shù)據(jù)能夠被安全地使用。

6、數(shù)據(jù)標(biāo)準(zhǔn)

數(shù)據(jù)要有統(tǒng)一的標(biāo)準(zhǔn)，保障數(shù)據(jù)內(nèi)外部使用和交換的一致性和準(zhǔn)確性的規(guī)范性約束，通過統(tǒng)一規(guī)范，消除二義性。

定制統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)平臺(tái)，包括字段標(biāo)準(zhǔn)管理，碼值標(biāo)準(zhǔn)管理以及字典管理，業(yè)務(wù)源數(shù)據(jù)和中臺(tái)數(shù)據(jù)統(tǒng)一標(biāo)準(zhǔn)。

四、數(shù)據(jù)治理的幾點(diǎn)誤區(qū)

1、數(shù)據(jù)治理是否要做得大而全

不同階段和規(guī)模的銀行，數(shù)據(jù)治理的實(shí)施程度會(huì)有所不同，一般建設(shè)先根據(jù)自身的數(shù)據(jù)狀況分階段進(jìn)行，避免盲目鋪開規(guī)模，過程中可調(diào)整。

2、數(shù)據(jù)治理是技術(shù)部門的事嗎

數(shù)據(jù)治理不僅僅是技術(shù)團(tuán)隊(duì)的事，而銀行各部門一起協(xié)作完成，包括各業(yè)務(wù)線以及其它網(wǎng)點(diǎn)和營(yíng)銷點(diǎn)。

3、數(shù)據(jù)治理不是短期的項(xiàng)目

數(shù)據(jù)治理是個(gè)長(zhǎng)期過程，隨著業(yè)務(wù)發(fā)展和銀行規(guī)模增長(zhǎng)，業(yè)務(wù)系統(tǒng)的不斷的迭代，數(shù)據(jù)治理是一個(gè)長(zhǎng)期而持續(xù)的項(xiàng)目。

4、一定需要建設(shè)平臺(tái)嗎

前期平臺(tái)不是必須的，首先要有成熟的數(shù)據(jù)治理體系和策略，自建平臺(tái)和采購(gòu)平臺(tái)都可以，先把體系建設(shè)好。

5、數(shù)據(jù)質(zhì)量問題各類原因

有業(yè)務(wù)方面的數(shù)據(jù)定義不明確，也有技術(shù)方面的數(shù)據(jù)抽取不完整。

有管理方面的崗位職責(zé)不清晰，也有執(zhí)行層面的數(shù)據(jù)操作不規(guī)范。

有數(shù)據(jù)處理加工過程中出現(xiàn)了錯(cuò)誤，也有數(shù)據(jù)源本身就有問題。

有數(shù)據(jù)治理系統(tǒng)功能有缺陷，也有系統(tǒng)強(qiáng)大但是沒人用……

五、小結(jié)

數(shù)據(jù)治理是銀行數(shù)據(jù)建設(shè)必不可少的一個(gè)環(huán)節(jié)。好的數(shù)據(jù)治理體系可以盤活整條數(shù)據(jù)鏈路，最大化保障銀行數(shù)據(jù)的采集、存儲(chǔ)、計(jì)算和使用過程的可控和可追溯。

數(shù)據(jù)治理是幾乎需要所有部門參與和支持的項(xiàng)目，進(jìn)行長(zhǎng)期且持續(xù)的堅(jiān)持才能實(shí)現(xiàn)成功的系統(tǒng)項(xiàng)目。

數(shù)據(jù)治理的最終目標(biāo)是賦能業(yè)務(wù)，提升數(shù)據(jù)價(jià)值。這是一個(gè)持續(xù)漫長(zhǎng)的運(yùn)營(yíng)過程，需要逐步完善、分步迭代，指望一步到位完成數(shù)據(jù)治理是不現(xiàn)實(shí)的。

項(xiàng)目型的數(shù)據(jù)治理，是不全面的，無延續(xù)性，能夠解決一時(shí)的數(shù)據(jù)問題，但很難獲得持續(xù)的數(shù)據(jù)價(jià)值。