數(shù)據(jù)產(chǎn)品經(jīng)理——平臺(tái)架構(gòu)知識(shí)加持讓你更專業(yè)
“數(shù)據(jù)產(chǎn)品經(jīng)理角色有很多種,要處理的問題也有多方面,想做好數(shù)據(jù)產(chǎn)品工作,最基礎(chǔ)要做到比用戶更懂系統(tǒng),比研發(fā)更懂用戶。”
01
一個(gè)好的數(shù)據(jù)產(chǎn)品經(jīng)理在工作中一定是在不斷地做角色切換,但是能讓你角色切換自如的基礎(chǔ)一定是你夠?qū)I(yè),對(duì)于工作中遇到的問題能快速響應(yīng)并解決。作為數(shù)據(jù)產(chǎn)品經(jīng)理,用戶和研發(fā)是我們的主要客戶,解決他們的問題占了我們?nèi)粘9ぷ鞯暮艽笠徊糠?。相信你?jīng)常會(huì)遇到以下問題:
1. 用戶
“我用excel直接透視很快就能計(jì)算完成的表,你們?cè)趺淳妥霾涣四兀繛槭裁醋霾涣?,你能給個(gè)理由嗎,還是就是你們不想做?”
“你別跟我說這是業(yè)務(wù)系統(tǒng)的問題,我的表是你們開發(fā)的,數(shù)據(jù)有問題我不找你們找誰?”
“這個(gè)數(shù)據(jù)取不到,跟我們有什么關(guān)系啊,取不到你們就想辦法去取啊。”
“這么簡(jiǎn)單的一個(gè)東西你們做出來還需要一周的時(shí)間?你搞錯(cuò)了吧? ”
2. 研發(fā)
“這個(gè)指標(biāo)計(jì)算邏輯就不合理啊,不能這么做,我做不出來?!?/p>
“這個(gè)表指標(biāo)邏輯很復(fù)雜,我需要兩周。為什么?因?yàn)檠邪l(fā)過程很困難??!跟你說了你也不懂,你就跟用戶說搞不出來就行了?!?/p>
“我跟你說過啊,這個(gè)數(shù)據(jù)出不來不是我們的原因,你去找業(yè)務(wù)系統(tǒng)那邊的人解決?!?/p>
面對(duì)上述用戶和研發(fā)提出的這些問題,如果數(shù)據(jù)產(chǎn)品經(jīng)理不知道如何處理,那你可能經(jīng)常被懟的手足無措,產(chǎn)品研發(fā)工作推進(jìn)滯后,然而責(zé)任還都是你的。
02
怎么辦呢?細(xì)看下上述問題,如果你了解一些開發(fā)相關(guān)的知識(shí),清楚數(shù)據(jù)產(chǎn)品研發(fā)過程,你就會(huì)清楚為什么有些問題必須要業(yè)務(wù)系統(tǒng)先解決;你也能判斷開發(fā)預(yù)估的研發(fā)時(shí)間是否合理;你甚至能直接跟開發(fā)提供一個(gè)解決方案,從被動(dòng)接受轉(zhuǎn)變?yōu)橹鲃?dòng)規(guī)劃。
對(duì)開發(fā)知識(shí)的了解,建議你先從平臺(tái)架構(gòu)開始,一般很少有人會(huì)主動(dòng)去跟你介紹平臺(tái)的架構(gòu),大家都覺得這是開發(fā)要清楚的事,所以很多數(shù)據(jù)產(chǎn)品很容易就讓自己對(duì)于某個(gè)問題陷入模棱兩可狀態(tài)。了解數(shù)據(jù)平臺(tái)架構(gòu)不僅讓你輕松解決上述問題,同時(shí)讓你能提前預(yù)見研發(fā)過程中可能存在的問題及難點(diǎn),并在做產(chǎn)品設(shè)計(jì)環(huán)節(jié)甚至內(nèi)容規(guī)劃環(huán)節(jié)就能考慮到風(fēng)險(xiǎn)點(diǎn)并提前規(guī)劃解決方案。
03
數(shù)據(jù)平臺(tái)架構(gòu),網(wǎng)上查一下就有很多相關(guān)的書籍資料,不過每個(gè)人的接受和理解程度不一樣,接下來我會(huì)以數(shù)據(jù)產(chǎn)品經(jīng)理的角度基于日常遇到的問題進(jìn)行歸納總結(jié),希望能對(duì)大家有幫助。
在公司業(yè)務(wù)規(guī)摸小,產(chǎn)生數(shù)據(jù)量少的時(shí)候,對(duì)于數(shù)據(jù)的需求都是直接從業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫直接取數(shù),并沒有數(shù)據(jù)平臺(tái)架構(gòu)的概念,但隨著數(shù)據(jù)量的增多,數(shù)據(jù)分析需求與日俱增,公司開始組建大數(shù)據(jù)團(tuán)隊(duì),搭建數(shù)據(jù)平臺(tái)。
數(shù)據(jù)平臺(tái)架構(gòu)從數(shù)據(jù)流向來看,簡(jiǎn)單來說分為三大層:源系統(tǒng)數(shù)據(jù)層、ODS層、數(shù)據(jù)倉庫層、大數(shù)據(jù)平臺(tái)應(yīng)用層。
具體框架如圖所示:
1. 業(yè)務(wù)系統(tǒng)層
在業(yè)務(wù)層面,大數(shù)據(jù)平臺(tái)本身不產(chǎn)生數(shù)據(jù),所有數(shù)據(jù)均來自于各業(yè)務(wù)系統(tǒng),以零售行業(yè)來說,如銷售訂單數(shù)據(jù)、商品信息、商品庫存數(shù)據(jù)、會(huì)員信息等數(shù)據(jù)。
2. ODS層
ODS層翻譯過來是指操作性數(shù)據(jù)存儲(chǔ),是介于業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫和數(shù)據(jù)倉庫之間的一種數(shù)據(jù)存儲(chǔ)形態(tài),數(shù)據(jù)從業(yè)務(wù)系統(tǒng)抽取至ODS層,一般不會(huì)做處理,與源系統(tǒng)數(shù)據(jù)保持一致,這樣就降低了數(shù)據(jù)抽取過程中數(shù)據(jù)轉(zhuǎn)化的復(fù)雜性。
之所以有ODS層,目的是為了在業(yè)務(wù)系統(tǒng)和數(shù)據(jù)倉庫之間形成一個(gè)隔離層,同時(shí)轉(zhuǎn)移一部分業(yè)務(wù)系統(tǒng)細(xì)節(jié)查詢的功能。在建立數(shù)據(jù)倉庫之前,數(shù)據(jù)都是直接從業(yè)務(wù)系統(tǒng)提取,隨著數(shù)據(jù)量和指標(biāo)復(fù)雜性增強(qiáng),對(duì)業(yè)務(wù)系統(tǒng)產(chǎn)生了比較大的壓力,有了ODS層之后,這部分的需求就可以直接在ODS層進(jìn)行。
3. 數(shù)據(jù)倉庫層
數(shù)據(jù)倉庫以O(shè)DS層數(shù)據(jù)為基礎(chǔ),通過一定的邏輯轉(zhuǎn)換輸出表?;跀?shù)據(jù)集成程度不同,數(shù)據(jù)倉庫的表也分為三個(gè)層次:基礎(chǔ)數(shù)據(jù)層,主題大寬表、數(shù)據(jù)集市層。
基礎(chǔ)數(shù)據(jù)層
基礎(chǔ)數(shù)據(jù)層的數(shù)據(jù)是基于ODS層數(shù)據(jù)進(jìn)行輕度匯總,產(chǎn)生出一定的明細(xì)表。譬如商品相關(guān)的主要信息譬如商品的大中小分類、商品供應(yīng)商信息、商品配送信息等在業(yè)務(wù)系統(tǒng)里面分散在不同的表中,數(shù)據(jù)倉庫將這些數(shù)據(jù)進(jìn)行匯總成商品主數(shù)據(jù),后面跟商品相關(guān)的信息的則可以直接查詢。
大寬表主題層
大寬表主題層的數(shù)據(jù)來自于ODS層和基礎(chǔ)數(shù)據(jù)層,在這一層,會(huì)將業(yè)務(wù)數(shù)據(jù)按主題劃分聚合集成。譬如分析商品時(shí),一般業(yè)務(wù)會(huì)將商品庫存作為一個(gè)主題去分析,在這一層,開發(fā)會(huì)將商品庫存相關(guān)的數(shù)據(jù)按一定的維度及指標(biāo)進(jìn)行聚合。譬如商品在門店、各倉庫的現(xiàn)在庫存、在途庫存、調(diào)撥庫存、在單庫存等,報(bào)表一般會(huì)到最細(xì)顆粒(商品、倉庫庫位)。
數(shù)據(jù)集市層
數(shù)據(jù)集市層出的表及字段一般都是直接按用戶需求出表,基于基礎(chǔ)數(shù)據(jù)層和大寬表主題層報(bào)表進(jìn)行進(jìn)一步的高度集成,譬如用戶需要分析不同大類的商品庫存金額、庫存數(shù)量,開發(fā)則會(huì)將商品主數(shù)據(jù)和商品庫存表上部分字段按一定邏輯進(jìn)行聚合生成用戶需求報(bào)表。
4. 數(shù)據(jù)應(yīng)用展現(xiàn)層
數(shù)據(jù)倉庫開發(fā)完成用戶需求報(bào)表數(shù)據(jù)后,通過大數(shù)據(jù)平臺(tái)應(yīng)用層展現(xiàn)給用戶查詢使用。當(dāng)然大數(shù)據(jù)平臺(tái)的內(nèi)容很多,這里我們只按數(shù)據(jù)流向說明數(shù)據(jù)平臺(tái)的應(yīng)用功能。
上述為根據(jù)數(shù)據(jù)流向解析的大數(shù)據(jù)平臺(tái)架構(gòu),平臺(tái)搭建和實(shí)際開發(fā)過程中肯定更為復(fù)雜,其中數(shù)據(jù)倉庫的建設(shè)與研發(fā)同事對(duì)于業(yè)務(wù)的理解和報(bào)表數(shù)據(jù)結(jié)構(gòu)的規(guī)劃有很大關(guān)系,但是作為數(shù)據(jù)產(chǎn)品經(jīng)理,能清楚這個(gè)數(shù)據(jù)開發(fā)過程就能解決我們工作中的很多問題了。
04
1. 作為數(shù)據(jù)產(chǎn)品經(jīng)理,日常工作中會(huì)遇到很多問題需要你有一定的開發(fā)只是作為基礎(chǔ)去解決,清楚大數(shù)據(jù)平臺(tái)架構(gòu),理解數(shù)據(jù)開發(fā)過程和流向能讓我們更專業(yè)地解決上述問題。
2. 大數(shù)據(jù)平臺(tái)架構(gòu)體現(xiàn)的數(shù)據(jù)研發(fā)過程以及平臺(tái)建設(shè)過程,按數(shù)據(jù)流向來看能助你更好的理解:數(shù)據(jù)分布在產(chǎn)生數(shù)據(jù)的業(yè)務(wù)系統(tǒng),大數(shù)據(jù)平臺(tái)抽過來通過一定邏輯集成、組合并生成用戶需求數(shù)據(jù)。
3. 下次面對(duì)用戶或者研發(fā)的問題,你可以這樣回,譬如:
“你別跟我說這是業(yè)務(wù)系統(tǒng)的問題,我的表是你們開發(fā)的,數(shù)據(jù)有問題我不找你們找誰?”
——我們數(shù)據(jù)平臺(tái)不產(chǎn)生數(shù)據(jù)的,基礎(chǔ)數(shù)據(jù)都來自于業(yè)務(wù)系統(tǒng),這個(gè)指標(biāo)數(shù)據(jù)有誤,是因?yàn)闃I(yè)務(wù)系統(tǒng)那邊對(duì)應(yīng)的基礎(chǔ)數(shù)據(jù)有誤,我也問了他們產(chǎn)品經(jīng)理,原因是您所在部門負(fù)責(zé)維護(hù)這個(gè)字段的人維護(hù)數(shù)據(jù)有誤。
“這個(gè)表指標(biāo)邏輯很復(fù)雜,我需要兩周。為什么?因?yàn)檠邪l(fā)過程很困難啊!跟你說了你也不懂,你就跟用戶說搞不出來就行了?!?/p>
——我已經(jīng)問了另一個(gè)同事,這個(gè)指標(biāo)對(duì)應(yīng)的基礎(chǔ)數(shù)據(jù)已經(jīng)全部從業(yè)務(wù)系統(tǒng)抽取過來了,并有相應(yīng)基礎(chǔ)數(shù)據(jù)大寬表,指標(biāo)對(duì)應(yīng)字段你都是可以直接取數(shù)的,請(qǐng)問難度要兩周的原因在哪里呢?
作者:王小涂,微信公眾號(hào):數(shù)據(jù)產(chǎn)品經(jīng)理進(jìn)階之路(ID:DATAPMLZ)希望和你一起探討數(shù)據(jù)產(chǎn)品經(jīng)理進(jìn)階之路!
本文由 @王小涂 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉(zhuǎn)載
題圖來自Unsplash,基于CC0協(xié)議
怎么保證交易數(shù)據(jù)準(zhǔn)確
大家期待已久的《數(shù)據(jù)產(chǎn)品經(jīng)理實(shí)戰(zhàn)訓(xùn)練營(yíng)》終于在起點(diǎn)學(xué)院(人人都是產(chǎn)品經(jīng)理旗下教育機(jī)構(gòu))上線啦!
本課程非常適合新手?jǐn)?shù)據(jù)產(chǎn)品經(jīng)理,或者想要轉(zhuǎn)崗的產(chǎn)品經(jīng)理、數(shù)據(jù)分析師、研發(fā)、產(chǎn)品運(yùn)營(yíng)等人群。
課程會(huì)從基礎(chǔ)概念,到核心技能,再通過典型數(shù)據(jù)分析平臺(tái)的實(shí)戰(zhàn),幫助大家構(gòu)建完整的知識(shí)體系,掌握數(shù)據(jù)產(chǎn)品經(jīng)理的基本功。
學(xué)完后你會(huì)掌握怎么建指標(biāo)體系、指標(biāo)字典,如何設(shè)計(jì)數(shù)據(jù)埋點(diǎn)、保證數(shù)據(jù)質(zhì)量,規(guī)劃大數(shù)據(jù)分析平臺(tái)等實(shí)際工作技能~
現(xiàn)在就添加空空老師(微信id:anne012520),咨詢課程詳情并領(lǐng)取福利優(yōu)惠吧!
謝謝作者!
此前在公司內(nèi)部培訓(xùn)聽過數(shù)據(jù)集市產(chǎn)品的講解,當(dāng)時(shí)沒上心,也就對(duì)這一塊有了大致概念。文章中內(nèi)容偏基礎(chǔ),但概念說的挺清晰的,作者加油。