5600字帶你全面系統(tǒng)了解主數(shù)據(jù)管理
編輯導語:主數(shù)據(jù)管理對于企業(yè)運營過程十分重要,是企業(yè)組織數(shù)據(jù)治理中不可或缺的一環(huán)。本篇文章作者分享了主數(shù)據(jù)的概念,價值,與其他數(shù)據(jù)的區(qū)別,以及在企業(yè)中具體實施落地的方法等內(nèi)容,一起來學習一下吧,希望對你有幫助。
在數(shù)據(jù)管理方面,有兩類數(shù)據(jù),需要政企重點關(guān)注,第一個是元數(shù)據(jù)管理,它是對所有數(shù)據(jù)進行定義,標準和劃分,賦予數(shù)據(jù)意義,元數(shù)據(jù)管理是我們數(shù)據(jù)管理的基石。
第二個則是主數(shù)據(jù),主數(shù)據(jù)是企業(yè)在運營中擔當關(guān)鍵角色,被系統(tǒng)間共享的數(shù)據(jù),分散在各個系統(tǒng)之中,比如產(chǎn)品名,部門組織架構(gòu),會員信息,供應(yīng)商信息等,都是重要,穩(wěn)定,被屢次使用的主數(shù)據(jù)。
這篇文章,我們重點了解一下,主數(shù)據(jù)的概念,價值,與企業(yè)其他數(shù)據(jù)的區(qū)別,管理范圍,以及如何在企業(yè)中具體實施落地。
一、什么是主數(shù)據(jù)
1. 主數(shù)據(jù)概念
主數(shù)據(jù),英文全稱是master data,根據(jù)國際數(shù)據(jù)協(xié)會DAMA定義:主數(shù)據(jù)是關(guān)于關(guān)鍵業(yè)務(wù)實體的權(quán)威的、最準確的數(shù)據(jù),可用于建立交易數(shù)據(jù)的關(guān)聯(lián)環(huán)境,主數(shù)據(jù)值被認為是“黃金”數(shù)據(jù)。
說起來很抽象,我們直接可以理解,主數(shù)據(jù)是數(shù)據(jù)的一類,具有穩(wěn)定,重要,被多系統(tǒng),多部門使用的數(shù)據(jù),比如商品信息,供應(yīng)商信息,進貨數(shù)據(jù),用戶會員信息,部門組織架構(gòu)等,在企業(yè)管理,業(yè)務(wù)發(fā)展中占據(jù)重要作用。
2. 主數(shù)據(jù)的3大特征
根據(jù)官方定義,主數(shù)據(jù)有3大特征:
- 主數(shù)據(jù)相對穩(wěn)定,變化比較小。比如超市里的商品,一般來說,不會有太大的變動,常見的日用品,蔬菜水果,家用電器等,都是相對固定的,變化不大。
- 主數(shù)據(jù)很重要,錯誤和不準確,都會產(chǎn)生重大的影響。比如電商促銷活動中,活動商品名出現(xiàn)錯誤,導致低價賤賣產(chǎn)品的情況,影響系統(tǒng)的交易數(shù)據(jù),商品發(fā)貨,退貨售后,客戶溝通等一系列事情,產(chǎn)生嚴重影響。
- 主數(shù)據(jù)被企業(yè)內(nèi)多個部門,多個業(yè)務(wù)流程系統(tǒng)引用。比如超市商品清單數(shù)據(jù),常常被進貨系統(tǒng),倉庫管理系統(tǒng),收銀銷售系統(tǒng)記錄,被多個部門和系統(tǒng)應(yīng)用得十分頻繁。
3. 企業(yè)常見的主數(shù)據(jù)
知道了主數(shù)據(jù)的特征,那么企業(yè)組織中,有哪些常見的主數(shù)據(jù)呢?企業(yè)中常見的主數(shù)據(jù)有企業(yè)組織架構(gòu),產(chǎn)品數(shù)據(jù),物料數(shù)據(jù),客戶數(shù)據(jù),供應(yīng)商數(shù)據(jù)等。
只要企業(yè)內(nèi)部的數(shù)據(jù),具備相對穩(wěn)定,記錄條數(shù)少,被多個流程系統(tǒng)引用,被交易數(shù)據(jù)重復(fù)使用的特點,都屬于主數(shù)據(jù)。
比如企業(yè)組織架構(gòu),相對穩(wěn)定不會隨便有大的變動,部門名稱被人力系統(tǒng),財務(wù)系統(tǒng),管理系統(tǒng)多個引用,對于公司日常運營管理非常重要。
二、主數(shù)據(jù)是企業(yè)數(shù)據(jù)6大層級中流砥柱
很多人可能之前聽說過元數(shù)據(jù),參考數(shù)據(jù)這些概念,那么他們和主數(shù)據(jù)有什么區(qū)別呢?
第二部分,我們系統(tǒng)介紹企業(yè)數(shù)據(jù)的6大層次,帶大家了解各個數(shù)據(jù)類型的概念,作用以及特點,明白主數(shù)據(jù)是企業(yè)數(shù)據(jù)治理的中流砥柱地位。
企業(yè)數(shù)據(jù)類型,主要分為元數(shù)據(jù),參考數(shù)據(jù),主數(shù)據(jù),條件型數(shù)據(jù),事務(wù)型數(shù)據(jù),分析型數(shù)據(jù)6大類。
1. 元數(shù)據(jù)
元數(shù)據(jù),指的是描述數(shù)據(jù)的數(shù)據(jù),是數(shù)據(jù)層次中的最底層,被稱為數(shù)據(jù)治理的基石。
元數(shù)據(jù)通常是定義數(shù)據(jù)名稱,關(guān)系,字段,約束關(guān)系等,用來表示數(shù)據(jù)相關(guān)的信息,主要為數(shù)據(jù)交換提供一個規(guī)范和標準。
比如企業(yè)要記錄客戶信息,需要用姓名,性別, 年齡,消費產(chǎn)品,消費金額這些詞語,姓名,性別,職業(yè),消費產(chǎn)品,消費金額都是對客戶描述的元數(shù)據(jù)。
2. 參考數(shù)據(jù)
第二層是參考數(shù)據(jù),它定義了元數(shù)據(jù)的可能取值的范圍,可能理解為,限制一定范圍的元數(shù)據(jù),就是參考數(shù)據(jù)。
比如國家,地區(qū),貨幣,品牌,產(chǎn)品類型這些通用的數(shù)據(jù),具有穩(wěn)定,靜態(tài)特點,基本不會變化,只需要通過系統(tǒng)配置文件給予規(guī)范并固化在信息管理系統(tǒng)中,參考數(shù)據(jù)是數(shù)據(jù)系統(tǒng)中的框架。
3. 主數(shù)據(jù)
第三層是主數(shù)據(jù),它是描述企業(yè)核心和運營的數(shù)據(jù),被重復(fù)或共享應(yīng)用于多個業(yè)務(wù)流程,多個部門和系統(tǒng)的高價值基礎(chǔ)數(shù)據(jù)。從主數(shù)據(jù)開始,數(shù)據(jù)就開始被應(yīng)用,開始朝著企業(yè)管理,業(yè)務(wù)開始落地。
比如產(chǎn)品信息,客戶信息,供應(yīng)商,部門組織架構(gòu)等,都是具有重要,穩(wěn)定,被多個系統(tǒng)和部門使用的主數(shù)據(jù)。
4. 條件型數(shù)據(jù)
第四層是條件型數(shù)據(jù),指的是出現(xiàn)在特定條件場景下出現(xiàn)的數(shù)據(jù)。比如銀行的客戶信用等級信息,這個數(shù)據(jù)只有在評定用戶信用等級這個場景,才會出現(xiàn)。
5. 事務(wù)型數(shù)據(jù)
事務(wù)型數(shù)據(jù),指的是記錄企業(yè)運營過程中產(chǎn)生的業(yè)務(wù)數(shù)據(jù),比如銷售訂單,采購訂單,財務(wù)憑證等,事務(wù)性數(shù)據(jù),依賴于主數(shù)據(jù),可以看做是主數(shù)據(jù)的細分內(nèi)容,開始不斷細化。
6. 分析型數(shù)據(jù)
分析型數(shù)據(jù),指的是由各類事務(wù)型數(shù)據(jù)組成的數(shù)據(jù),比如各種報表,BI分析,審計數(shù)據(jù)等,是由很多事務(wù)型數(shù)據(jù),進行組成搭建的。
我們通過企業(yè)6大數(shù)據(jù)層次類型看到,元數(shù)據(jù)是我們數(shù)據(jù)治理的基石,參考數(shù)據(jù)是數(shù)據(jù)系統(tǒng)中的框架,主數(shù)據(jù)是數(shù)據(jù)落實到企業(yè)管理,業(yè)務(wù)中的重要數(shù)據(jù)類型,條件型數(shù)據(jù),事務(wù)性數(shù)據(jù),分析型數(shù)據(jù),則是不斷細分,滿足各個細分場景的數(shù)據(jù)。
三、影響主數(shù)據(jù)劃分范圍變化3大因素
前面我們已經(jīng)知道主數(shù)據(jù)的重要性,如果管理不善,很容易影響組織的管理和業(yè)務(wù)問題。但要管理主數(shù)據(jù)的前提,就是如何識別主數(shù)據(jù),先有了主數(shù)據(jù),才能管理,所以我們需要限定主數(shù)據(jù)的范圍。
一般情況下,主數(shù)據(jù)是相對穩(wěn)定的,比如公司產(chǎn)品信息,供應(yīng)商,組織架構(gòu),用戶會員信息等,但是主數(shù)據(jù)也會隨著業(yè)務(wù)發(fā)展階段,業(yè)務(wù)運營模式,業(yè)務(wù)管控策略發(fā)生變化,企業(yè)需要實時增添刪減主數(shù)據(jù)。
1. 業(yè)務(wù)發(fā)展階段
首先第一個影響因素是業(yè)務(wù)發(fā)展。主數(shù)據(jù)相對穩(wěn)定,但隨著業(yè)務(wù)發(fā)展階段變化,也會改變。
比如一個新飯店經(jīng)過一段時間營業(yè),擁有一批忠實的老客戶,這時飯店就可推出會員制度,增加老客戶的粘性,企業(yè)收集了一批用戶會員信息數(shù)據(jù)。
因為會員信息很穩(wěn)定重要,并且要經(jīng)過眾多會員系統(tǒng),財務(wù)系統(tǒng)所引用,所以需要納入主數(shù)據(jù)管理的范疇。
因此,企業(yè)在業(yè)務(wù)發(fā)展不同階段,需要適當增加,或者刪減部分主數(shù)據(jù),以滿足內(nèi)部管理和業(yè)務(wù)發(fā)展的需求。
2. 業(yè)務(wù)運營模式
第二個因素是業(yè)務(wù)模式發(fā)生變化。比如銷售訂單類型數(shù)據(jù),很多時候,在面向B端企業(yè)屬于主數(shù)據(jù),在面向C端企業(yè)則反而不是。
我們?nèi)コ匈徫锏囊淮蜗M數(shù)據(jù)記錄,對于超市收銀系統(tǒng)來說,數(shù)據(jù)丟失也沒有太大影響,所以不能算做主數(shù)據(jù)。
但對于一些偏B端,產(chǎn)品客單價高的行業(yè)公司,比如華為公司接到一個上千萬,上億的網(wǎng)絡(luò)建設(shè)的項目合同,通常在企業(yè)內(nèi)部涉及采購,制造,工程,財務(wù)等多個業(yè)務(wù)環(huán)節(jié),時間要長達數(shù)年之久。這個銷售數(shù)據(jù)重要,穩(wěn)定,并且被多個部門和系統(tǒng)使用,所以屬于主數(shù)據(jù)。
因此,我們要深刻理解主數(shù)據(jù)含義,只要符合穩(wěn)定,重要,被多個部門和系統(tǒng)使用的數(shù)據(jù),才是專屬于某個行業(yè),企業(yè)的數(shù)據(jù)。
3. 業(yè)務(wù)管控策略
對于一些大型的集團,想要掌控各個分公司的客戶數(shù)據(jù),是非常困難的,阻力很大。
所以即使集團總部想掌握這些重要的客戶數(shù)據(jù),但因為無法被總部利用,沒有辦法在總部內(nèi)部流通和使用,所以分公司的客戶,銷售數(shù)據(jù),不算主數(shù)據(jù)。
所以企業(yè)在管理主數(shù)據(jù)時,也要根據(jù)業(yè)務(wù)發(fā)展階段,業(yè)務(wù)運營,業(yè)務(wù)管控策略等方向,對主數(shù)據(jù)進行增加刪減,重新確定主數(shù)據(jù)劃分范圍。
四、主數(shù)據(jù)管理實施5大步驟
主數(shù)據(jù)管理如何重要,那么企業(yè)應(yīng)該如何進行主數(shù)據(jù)的管理實施落地呢?企業(yè)主數(shù)據(jù)管理實施,主要分為5個步驟進行:
主數(shù)據(jù)管理實施5大步驟
1. 明確主數(shù)據(jù)目標和范圍
首先,第一步,我們要明確主數(shù)據(jù)管理的目標和識別范圍。
1)目標制定
企業(yè)內(nèi)部需要開啟一個宣講會,讓組織的高層,中層,基層都加深對主數(shù)據(jù)管理的理解,設(shè)定主數(shù)據(jù)管理目標,提高重視程度,確保主數(shù)據(jù)管理的項目可以順利推進實施。
2)主數(shù)據(jù)識別范圍
確定了目標之后,想要對主數(shù)據(jù)進行管理,我們首先要對主數(shù)據(jù)進行識別,判斷哪些數(shù)據(jù)是主數(shù)據(jù),值得我們投入時間和精力去管理。
主數(shù)據(jù)識別,通常有4個步驟:
- 第一步,我們確定主數(shù)據(jù)識別指標,比如判斷數(shù)據(jù)重要性,穩(wěn)定性,業(yè)務(wù)價值等
- 第二步,我們要基于主數(shù)據(jù)識別指標,構(gòu)建評分體系,確定指標權(quán)重,根據(jù)重要性,穩(wěn)定性,使用頻率等,每一個指標進行加權(quán)評分
- 第三步,根據(jù)業(yè)務(wù)調(diào)研和數(shù)據(jù)普查結(jié)果,確定主數(shù)據(jù)參評范圍
- 第四步,依據(jù)評分標準,在主數(shù)據(jù)參評范圍內(nèi),識別出企業(yè)主數(shù)據(jù)
2. 主數(shù)據(jù)調(diào)研
確定目標和范圍之后,企業(yè)有了基本的方向和想法。接下來,就是實地調(diào)研,調(diào)研企業(yè)的主數(shù)據(jù)規(guī)則,管理情況,明白現(xiàn)實和目標之間的差距。
一般來說,數(shù)據(jù)資源調(diào)查,有2種方法,一種是從上往下,另一種是自下向上。
1)自上而下調(diào)查
- 自上而下調(diào)查,一般是采用信息資源規(guī)劃或者業(yè)務(wù)流程管理規(guī)劃采集數(shù)據(jù)。信息資源規(guī)劃,指的是對所在單位信息采集,傳輸和使用的全年規(guī)劃;業(yè)務(wù)流程更努力規(guī)劃,是根據(jù)業(yè)務(wù)的流程運作,獲取主數(shù)據(jù)的流通方向,使用頻次。
- 自上而下調(diào)查法,可以讓管理者對主數(shù)據(jù)管理現(xiàn)狀,有整體全面系統(tǒng)了解,可以看到數(shù)據(jù)流通,數(shù)據(jù)使用情況,消除數(shù)據(jù)孤島的問題,但缺點是需要消耗較高的成本和周期。
2)自下而上調(diào)查
自下而上調(diào)查,一般是先確定主數(shù)據(jù)的數(shù)據(jù)范圍,先識別出主數(shù)據(jù)。
在限定范圍前提下,企業(yè)對主數(shù)據(jù)情況進行梳理和分析,這個方法的優(yōu)點是針對性強,實施速度快,缺點是不夠系統(tǒng)和全面,一般是有了明確的項目目標和范圍內(nèi)采用此方法最佳。
3. 搭建制度與流程
確定目標和主數(shù)據(jù)識別范圍,調(diào)研了現(xiàn)狀,我們已經(jīng)明確梳理出了主數(shù)據(jù)的情況,第三步,我們就要根據(jù)實際情況,從組織,制度,運營層面,對主數(shù)據(jù)進行管理。
1)管理組織體系
良好的組織架構(gòu),是數(shù)據(jù)治理項目成功的保證,是高層管理者對數(shù)據(jù)治理項目重視性的體現(xiàn),有一個專門的組織或者崗位管理主數(shù)據(jù),是十分必要的。
常見的主數(shù)據(jù)管理崗位,有主數(shù)據(jù)系統(tǒng)管理員,主數(shù)據(jù)審核員,主數(shù)據(jù)填報員,數(shù)據(jù)質(zhì)量管理員等,具體組織部門和崗位,根據(jù)企業(yè)的實際情況而定。
2)制度流程體系
部門成立之后,接下來需要特定的制度和流程體系,來確保管理的高效性。
企業(yè)需要明確主數(shù)據(jù)的歸口部門和崗位,明確崗位職責,每個主數(shù)據(jù)的申請,審批,變更,共享的流程,確保主數(shù)據(jù)管理有效實施。
3)標準、安全和技術(shù)體系
有了整體的制度流程體系后,接下來就是具體的標準,安全和技術(shù)體系。標準體系,我們需要設(shè)定一格式,編碼標準,讓各個部門可以快捷高效識別和使用主數(shù)據(jù)。
安全體系,需要建立嚴格的身份認證,訪問控制,分級授權(quán),安全審計,還包括數(shù)據(jù)加密存儲,加密傳輸,脫敏脫密等功能,保障數(shù)據(jù)安全。
技術(shù)體系,技術(shù)部門需要搭建應(yīng)用層面和技術(shù)層面的體系。數(shù)據(jù)管理平臺,在應(yīng)用層面需要具備數(shù)據(jù)管理,數(shù)據(jù)治理,數(shù)據(jù)集成等功能,技術(shù)層面,需要考慮系統(tǒng)架構(gòu),接口規(guī)范,技術(shù)標準等內(nèi)容。
4. 接數(shù)據(jù)
把目標制定,主數(shù)據(jù)調(diào)研,體系建立后,我們接下來做的需要接入和接出主數(shù)據(jù),打通主數(shù)據(jù)在企業(yè)中產(chǎn)生,接入,接出的閉環(huán)。
1)主數(shù)據(jù)接入
主數(shù)據(jù)接入是將主數(shù)據(jù)從數(shù)據(jù)源系統(tǒng)匯集到主數(shù)據(jù)平臺的過程,過程需要對接入數(shù)據(jù)進行清洗、轉(zhuǎn)換、映射、去重、合并、加載,通過一系列的數(shù)據(jù)加工和處理形成標準統(tǒng)一的主數(shù)據(jù)。
2)主數(shù)據(jù)接出
主數(shù)據(jù)接出,是把標準化的數(shù)據(jù),共享給需要使用的部門的過程。
通過接入和接出,來測驗主數(shù)據(jù)的管理,制度,流程,標準,輸入和使用的各個情況測驗,方便后期日常運營的優(yōu)化改進。
5. 日常運營
主數(shù)據(jù)管理的最后一步,就是把主數(shù)據(jù)日常用于企業(yè)和組織中,發(fā)揮效用的運營過程。
日常運營過程,包括主數(shù)據(jù)運營管理優(yōu)化,主數(shù)據(jù)推廣,主數(shù)據(jù)質(zhì)量提升,主數(shù)據(jù)價值衡量4個部分。
1)主數(shù)據(jù)管理優(yōu)化
主數(shù)據(jù)管理優(yōu)化,指的是對主數(shù)據(jù)的新增,變更,使用等過程中的規(guī)范,進行流程和制度的測試,達到定崗定責,流程順暢,標準鮮明的目標,對于日常使用問題,進行積累并不斷優(yōu)化。
2)主數(shù)據(jù)推廣
主數(shù)據(jù)推廣,指的是把主數(shù)據(jù)管理推廣到各個業(yè)務(wù)線,業(yè)務(wù)系統(tǒng)中,保障主數(shù)據(jù)的一致性,通過推廣和使用,讓數(shù)據(jù)輔助組織高層決策,提高組織運營效率。
3)主數(shù)據(jù)質(zhì)量提升
主數(shù)據(jù)質(zhì)量提升,主數(shù)據(jù)是企業(yè)寶貴的數(shù)據(jù)資產(chǎn),質(zhì)量好壞影響著數(shù)據(jù)價值。所以在日常運營中,需要持續(xù)提升數(shù)據(jù)質(zhì)量。主數(shù)據(jù)質(zhì)量管理,包括主數(shù)據(jù)質(zhì)量定義,主數(shù)據(jù)質(zhì)量模型,主數(shù)據(jù)質(zhì)量考評等。
4)主數(shù)據(jù)價值衡量
主數(shù)據(jù)價值衡量,指的是企業(yè)要衡量主數(shù)據(jù)帶來的價值,更加深入主數(shù)據(jù)對組織管理,業(yè)務(wù)盈利起到的價值和作用。具體的作用有降本增效,提高了組織的運轉(zhuǎn)效率;數(shù)據(jù)輔助高層決策,增加業(yè)務(wù)收入等,需要進行價值衡量。
五、小結(jié)
主數(shù)據(jù),是重要,穩(wěn)定,被多個業(yè)務(wù)系統(tǒng),多個部門反復(fù)使用的數(shù)據(jù)。主數(shù)據(jù)管理,是企業(yè)組織數(shù)據(jù)治理中不可或缺的一環(huán)。
主數(shù)據(jù)管理離不開系統(tǒng),但不僅僅是系統(tǒng),而是集架構(gòu)于標準、流程規(guī)范、組織和IT系統(tǒng)的一整套管理措施。用“統(tǒng)一標準、統(tǒng)一流程、統(tǒng)一源頭、統(tǒng)一組織”來約束與規(guī)范主數(shù)據(jù)管理絕對不為過。
本文由@ 數(shù)據(jù)分析獅 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載。
題圖來自 Unsplash, 基于 CC0 協(xié)議。
點贊??