中臺(tái)的概念已經(jīng)數(shù)年了，不少公司也在內(nèi)部開(kāi)發(fā)或者引入第三方做自己的中臺(tái)。對(duì)于一個(gè)新的產(chǎn)品來(lái)講，并不是很能理解中臺(tái)的意義。這篇文章，作者分享了為什么要做數(shù)據(jù)中臺(tái)的意義和價(jià)值，與大家分享。

我們都知道，隨著政府、企業(yè)、園區(qū)等信息化系統(tǒng)如火如荼的持續(xù)建設(shè)，數(shù)據(jù)問(wèn)題逐漸凸顯，我們從數(shù)據(jù)現(xiàn)狀，數(shù)據(jù)應(yīng)用，技術(shù)路徑等方面著手，淺析數(shù)據(jù)中臺(tái)產(chǎn)品的建設(shè)意義。

一、改善數(shù)據(jù)現(xiàn)狀

以下是未引入數(shù)據(jù)中臺(tái)時(shí)信息系統(tǒng)中數(shù)據(jù)的現(xiàn)狀。

1. 數(shù)據(jù)質(zhì)量不佳

• 因?yàn)橄到y(tǒng)建設(shè)的先后問(wèn)題、建設(shè)團(tuán)隊(duì)不同等問(wèn)題會(huì)導(dǎo)致數(shù)據(jù)統(tǒng)計(jì)口徑不一致，比如同名不同意或同意不同名，例如有的系統(tǒng)區(qū)分性別是男/女，有的是先生/女士。
• 業(yè)務(wù)數(shù)據(jù)缺失，有些業(yè)務(wù)系統(tǒng)對(duì)關(guān)鍵流程未做校驗(yàn)，導(dǎo)致關(guān)鍵數(shù)據(jù)缺失。比如某些數(shù)據(jù)找不到上報(bào)路徑，是云云對(duì)接的數(shù)據(jù)還是機(jī)器直報(bào)的數(shù)據(jù)無(wú)從得知。
• 數(shù)據(jù)臟亂差，比如重復(fù)數(shù)據(jù)、無(wú)效數(shù)據(jù)、空數(shù)據(jù)、不合法數(shù)據(jù)等，這些數(shù)據(jù)無(wú)法正常使用，需要進(jìn)行特定處理。

2. 數(shù)據(jù)架構(gòu)落后

• 因?yàn)橄到y(tǒng)建設(shè)的歷史問(wèn)題，信息化進(jìn)程并非從上至下統(tǒng)一規(guī)劃，導(dǎo)致系統(tǒng)間相互割裂，無(wú)法實(shí)現(xiàn)數(shù)據(jù)共享，關(guān)聯(lián)數(shù)據(jù)又存儲(chǔ)在不同系統(tǒng)中，正所謂“數(shù)據(jù)孤島”。
• 隨著業(yè)務(wù)系統(tǒng)數(shù)據(jù)量的日漸龐大，操作、查詢(xún)、導(dǎo)出等操作效率越來(lái)越低。

通過(guò)引入數(shù)據(jù)中臺(tái)，經(jīng)過(guò)數(shù)據(jù)治理模，持續(xù)改善數(shù)據(jù)質(zhì)量，優(yōu)化數(shù)據(jù)架構(gòu)。

二、全面挖掘數(shù)據(jù)資產(chǎn)，改善數(shù)據(jù)應(yīng)用面臨的問(wèn)題

近年來(lái)，“數(shù)據(jù)要素”，“數(shù)字資產(chǎn)”等概念不斷被提及，顯見(jiàn)數(shù)據(jù)的重要性，那么在我們現(xiàn)有信息化系統(tǒng)基礎(chǔ)上數(shù)據(jù)資產(chǎn)的應(yīng)用面臨的問(wèn)題有哪些？

1. 開(kāi)發(fā)運(yùn)營(yíng)成本升高

人力成本

隨著系統(tǒng)的正常運(yùn)營(yíng)，新的需求被不斷提出，而系統(tǒng)的開(kāi)發(fā)和運(yùn)維依賴(lài)大量的工程師，并需配套的服務(wù)人員，人員數(shù)量不斷增多，人力成本居高不下。

時(shí)間成本

系統(tǒng)的開(kāi)發(fā)只能按照計(jì)劃線(xiàn)性推進(jìn)，而隨著業(yè)務(wù)的復(fù)雜度逐漸增加，相同功能需要的時(shí)間越來(lái)越多，邊際效用遞減。

溝通成本

系統(tǒng)的開(kāi)發(fā)和運(yùn)維依賴(lài)于人之間的協(xié)作和配合，并要大量的工具、文件作為輔助，而系統(tǒng)數(shù)量的增加，業(yè)務(wù)復(fù)雜度的提高都導(dǎo)致了溝通成本的逐漸上升。

2. 數(shù)據(jù)資產(chǎn)浪費(fèi)

因?yàn)閿?shù)據(jù)孤島問(wèn)題，很多運(yùn)營(yíng)數(shù)據(jù)、管理數(shù)據(jù)、服務(wù)數(shù)據(jù)只能孤零零地存儲(chǔ)在業(yè)務(wù)系統(tǒng)中，無(wú)法為業(yè)務(wù)的精細(xì)化發(fā)展作分析支撐，更不能作為戰(zhàn)略決策的依據(jù)，造成了寶貴數(shù)據(jù)資源的浪費(fèi)。

通過(guò)引入數(shù)據(jù)中臺(tái)，可以將數(shù)據(jù)融合并自動(dòng)化的處理，節(jié)省新業(yè)務(wù)導(dǎo)致的開(kāi)發(fā)運(yùn)營(yíng)成本，也盤(pán)活了數(shù)據(jù)資產(chǎn)，挖掘了數(shù)據(jù)價(jià)值，為企業(yè)的決策分析提供支撐依據(jù)。

三、從技術(shù)角度看數(shù)據(jù)中臺(tái)的必要性

數(shù)據(jù)中臺(tái)中數(shù)據(jù)的存儲(chǔ)、處理用到數(shù)倉(cāng)技術(shù)，可以比對(duì)一下傳統(tǒng)數(shù)據(jù)庫(kù)和數(shù)倉(cāng)的區(qū)別。

1. 傳統(tǒng)數(shù)據(jù)庫(kù)VS數(shù)據(jù)中臺(tái)

處理的業(yè)務(wù)不同

傳統(tǒng)數(shù)據(jù)庫(kù)是操作型業(yè)務(wù)處理，即會(huì)對(duì)數(shù)據(jù)進(jìn)行增刪改查，數(shù)倉(cāng)是分析型業(yè)務(wù)處理，主要針對(duì)數(shù)據(jù)進(jìn)行查詢(xún)。

關(guān)注點(diǎn)不同

傳統(tǒng)數(shù)據(jù)庫(kù)更關(guān)注操作時(shí)的響應(yīng)時(shí)間、并發(fā)量等，數(shù)倉(cāng)關(guān)注的是數(shù)據(jù)分析，主要用來(lái)進(jìn)行商業(yè)決策。

存儲(chǔ)的數(shù)據(jù)類(lèi)型不同

傳統(tǒng)數(shù)據(jù)庫(kù)存儲(chǔ)的是業(yè)務(wù)數(shù)據(jù)，而數(shù)倉(cāng)存儲(chǔ)的是歷史數(shù)據(jù)。

冗余設(shè)計(jì)不同

傳統(tǒng)數(shù)據(jù)庫(kù)在設(shè)計(jì)時(shí)盡量避免冗余，而數(shù)倉(cāng)有意引入冗余以便支撐商業(yè)分析。

設(shè)計(jì)理念不同

傳統(tǒng)數(shù)據(jù)庫(kù)是為了捕獲數(shù)據(jù)而設(shè)計(jì)的，即用戶(hù)的每一個(gè)操作為變?yōu)閿?shù)據(jù)資產(chǎn)存儲(chǔ)在系統(tǒng)中，而數(shù)倉(cāng)是為分析數(shù)據(jù)而設(shè)計(jì)的。

總之，數(shù)據(jù)中臺(tái)不是不需要傳統(tǒng)數(shù)據(jù)庫(kù)，而是需要在傳統(tǒng)數(shù)據(jù)庫(kù)的上層再添加一層數(shù)據(jù)倉(cāng)庫(kù)來(lái)銜接數(shù)據(jù)源系統(tǒng)和分析/展示系統(tǒng)。

2. 為什么不直接在原有基礎(chǔ)上直接改造？

在原有架構(gòu)上改造豈不是成本更低？

原有過(guò)程是直讀的方式，瀏覽器直接讀取業(yè)務(wù)庫(kù)而獲取數(shù)據(jù)，經(jīng)過(guò)大量實(shí)踐證明，這條路不好走，失敗案例多入牛毛，原因如下：

1. 因?yàn)榘踩?，某些?shù)據(jù)無(wú)法直接讀取
2. 業(yè)務(wù)系統(tǒng)變更頻繁，需要重寫(xiě)分析系統(tǒng)和測(cè)試
3. 難以建立和維護(hù)來(lái)自多個(gè)系統(tǒng)的報(bào)表、匯總數(shù)據(jù)
4. 業(yè)務(wù)系統(tǒng)的很多列是硬編碼或是無(wú)意義字符串
5. 業(yè)務(wù)系統(tǒng)的數(shù)據(jù)格式不統(tǒng)一
6. 業(yè)務(wù)系統(tǒng)表結(jié)構(gòu)為事務(wù)處理而做的性能優(yōu)化不適用于查詢(xún)分析
7. 找不到適當(dāng)方式把有價(jià)值數(shù)據(jù)合并和應(yīng)用
8. 影響業(yè)務(wù)系統(tǒng)事務(wù)處理性能

所以，從技術(shù)角度看，想要快速、精確、低成本的進(jìn)行數(shù)據(jù)分析，引入中臺(tái)是必然的路徑。

在企業(yè)數(shù)字化實(shí)踐的道路上，隨著時(shí)間的積累，引入數(shù)據(jù)中臺(tái)是挖掘數(shù)據(jù)、節(jié)省成本、快速相應(yīng)決策分析需求的必經(jīng)之路。