全民CE,讓產(chǎn)品質(zhì)量更上一層

6 評論 4030 瀏覽 5 收藏 12 分鐘

編輯導(dǎo)語:全民CE是一種全民走查工具,它的本質(zhì)是讓更多人參與到產(chǎn)品操作體驗(yàn)中,提出使用感受,以幫助產(chǎn)品提高質(zhì)量。那么要怎么做全民CE呢?全民CE的效果又如何?一起來看一下吧。

01 什么是全民CE

全民CE是我們在終端產(chǎn)品提倡應(yīng)用的一種全民走查工具,CE就是 customer engagement,即用戶參與。

筆者最早是在騰訊的一篇采訪文章中看到,在我們內(nèi)部也稱之為“眾測”,其本質(zhì)是希望更多的人參與到產(chǎn)品操作體驗(yàn)中,提出并記錄使用過程中的不良感受和遇到的問題;產(chǎn)品設(shè)計(jì)方通過對此收集-分析-評估并執(zhí)行優(yōu)化,從而讓產(chǎn)品的質(zhì)量更上一層。

02 為什么要提倡全民CE

常規(guī)的產(chǎn)品設(shè)計(jì)流程中,UED設(shè)計(jì)師對交互界面的還原效果,本身就有走查環(huán)節(jié),那為什么還要提倡這樣一種全民走查工具呢?

1. 跳出設(shè)計(jì)思維,多角度發(fā)現(xiàn)問題

設(shè)計(jì)還原走查更多的是對設(shè)計(jì)方案是否有效落地的走查,比如,設(shè)計(jì)方案的邊距是10px,落地效果卻是5px;設(shè)計(jì)方案功能操作用的是按鈕,落地效果卻是文字等等,這些都屬于落地效果與設(shè)計(jì)方案不符,還原度差的問題。

除此之外,設(shè)計(jì)師其實(shí)很難再發(fā)現(xiàn)其他諸如交互流程是否合理,目標(biāo)按鈕是否能更塊地被找到,文案內(nèi)容是否可以被用戶看懂,操作過程中是否還會遇到其他困惑,以及困惑是否能很快地被解決等更多操作體驗(yàn)層面的問題。

因?yàn)槔碚撋显谠O(shè)計(jì)期間這些都已經(jīng)經(jīng)過情境分析、方案決策、設(shè)計(jì)評審的過程,是整個(gè)項(xiàng)目組認(rèn)可的方案。

經(jīng)過了深度參與,設(shè)計(jì)師有時(shí)候已經(jīng)熟悉到近乎麻木,認(rèn)為這就是一個(gè)完美的方案。

2. 多人參與,覆蓋面更廣,更易識別高頻問題

UED走查有設(shè)計(jì)稿做參照,測試有測試案例做依據(jù)。

那么全民CE中,作為普通用戶的參與者,正常情況下是沒有固定路徑和標(biāo)準(zhǔn)的,完全以個(gè)人操作目標(biāo)為導(dǎo)向自由發(fā)揮。因此,操作的路徑覆蓋面將更廣,這意味著一些不易現(xiàn)的問題或缺陷以及并發(fā)下存在的問題就有更大的被發(fā)現(xiàn)的可能性。

同時(shí),多人體驗(yàn)過程中,我們也更能識別高頻問題,在落地優(yōu)化時(shí)作為優(yōu)先級評估的一個(gè)依據(jù)。

3. 多部門協(xié)作,更易于推動落地

即使UED能夠發(fā)現(xiàn)還原度以外的問題,也未必能夠真正解決其中的一些問題。

問題的解決需要產(chǎn)品、開發(fā)、測試等各相關(guān)部門共同協(xié)作,甚至需要跨產(chǎn)品部協(xié)作,我們的產(chǎn)品各端的負(fù)責(zé)人不一定是同一個(gè)部門,同一波人;時(shí)間人力等資源安排也受到限制,只有在目標(biāo)共識的基礎(chǔ)上才能更好地推動落地。

4. 作為與客戶溝通方案有力的說服工具

我們通過全民CE獲得的數(shù)據(jù),能夠作為設(shè)計(jì)方案的源泉,在與客戶進(jìn)行溝通時(shí)更能自信,做到有的放矢,也更能獲得客戶的認(rèn)可。

綜上,我們需要更多設(shè)計(jì)師以外的角色,擺脫設(shè)計(jì)思維,站在用戶立場,以真實(shí)的用戶心態(tài)進(jìn)行產(chǎn)品操作,從更多角度挖掘更多的問題,更好地推動產(chǎn)品質(zhì)量的提升。

02 全民CE的兩種情況

我們目前進(jìn)行過的全民CE有兩種情況,一種是在產(chǎn)品發(fā)版之前,在測試環(huán)境進(jìn)行;另一種是直接在生產(chǎn)環(huán)境中進(jìn)行。這兩種情況各有優(yōu)劣,如下所示:

03 全民CE的全流程

全民CE的核心流程,就是發(fā)現(xiàn)問題-記錄問題-分析問題-執(zhí)行解決問題的過程。

作為用戶參與的活動,我們首先需要做一些前期的準(zhǔn)備,也就是哪些人參加?什么時(shí)候參加?用什么環(huán)境?給什么獎勵(lì)?評獎規(guī)則是什么等等,如果有特殊的需求的話也可以征集,比如手機(jī)型號、指定的功能清單等等。

1. 前期準(zhǔn)備

1)環(huán)境準(zhǔn)備,確定對接人

這里指測試環(huán)境,主要是盡量爭取所需數(shù)據(jù)的真實(shí)性、全面性,使用戶操作起來更具沉浸感。

測試環(huán)境中的數(shù)據(jù)不真實(shí)、不全面問題由來已久,我們在日常的UED還原度走查中就頻繁地遇到,后來,UED根據(jù)走查需要梳理了《UED走查配置標(biāo)準(zhǔn)文檔》,要求在走查前能夠按照文檔要求對測試環(huán)境的數(shù)據(jù)進(jìn)行配置,以覆蓋更多的功能與界面。

舉個(gè)例子:產(chǎn)品中有一個(gè)排序功能,以往我們遇到過所有的數(shù)據(jù)在點(diǎn)擊排序后沒有變化,原因是要么數(shù)據(jù)只有唯一的一條,要么數(shù)據(jù)雖然有多條,但是數(shù)據(jù)中那個(gè)排序的指標(biāo)數(shù)據(jù)都是一樣的。我們就在配置文檔中要求至少有2條以上數(shù)據(jù),且排序的指標(biāo)數(shù)據(jù)不等大。

其次,根據(jù)實(shí)際需要明確各部分對接人,比如遇到阻斷性問題找誰處理,又是誰充當(dāng)理財(cái)師角色等。

2)用戶招募

雖然是全民CE,但是會根據(jù)業(yè)務(wù)特點(diǎn)盡量招募與真實(shí)用戶接近的用戶,我們一般通過釘釘群、內(nèi)部郵件等方式發(fā)布海報(bào),面向符合目標(biāo)用戶的同事們招募,角色范圍包括項(xiàng)目經(jīng)理、產(chǎn)品需求、測試、實(shí)施以及UED部門。

招募海報(bào)的內(nèi)容包括:主題、口號、活動時(shí)間、號召文案、活動規(guī)則及獎勵(lì)、測試包下載及釘釘群二維碼,有興趣的用戶就可以通過掃碼進(jìn)群。

3)用戶及設(shè)備登記

明確哪些用戶參與之后,就需要對用戶的機(jī)型進(jìn)行登記,方便后面問題排查。IOS的系統(tǒng),還需要添加UDID,才能正常執(zhí)行,下表為設(shè)備登記表:

4)問題記錄模板準(zhǔn)備

我們需要提供一個(gè)問題記錄的模板,供參與的用戶操作過程中隨時(shí)記錄。這個(gè)模板包括問題記錄列表以及截圖,分別作為問題的描述和“證據(jù)”,目前我們已經(jīng)有了非常成熟的問題記錄模板:

當(dāng)然,由于截圖界面有點(diǎn)大,需要另起一個(gè)excel按編號記錄,這些都將在釘釘群里向招募的用戶說明。

2. 集中體驗(yàn)

萬事俱備,到了活動開始的日期,參與的用戶就可以從釘釘群下載最新的測試包開始體驗(yàn)了。

體驗(yàn)周期一般都會定在一周左右,大家可以根據(jù)自己的時(shí)間安排。走查過程中,發(fā)現(xiàn)問題或困惑隨時(shí)截圖并記錄問題清單,有任何疑問也可在釘釘群里提問,有專設(shè)的對接人解答。

對接人會在群里及時(shí)跟進(jìn)和答疑,產(chǎn)品經(jīng)理和開發(fā)每天會對問題進(jìn)行跟蹤,并對嚴(yán)重的比如阻斷性問題進(jìn)行及時(shí)修復(fù),以便用戶能繼續(xù)參與。

3. 問題分析與評估

當(dāng)然,所有的問題最后都需要進(jìn)行評估,并不是完全聽由用戶反饋而走向極端:就是用戶說的都對,用戶提的問題都必須解決。

產(chǎn)品經(jīng)理、開發(fā)、測試、UED以會議的方式對問題進(jìn)行評估,明確問題所屬范疇(是屬于用戶體驗(yàn)類的,還是屬于程序問題,是屬于配置問題還是需求問題)、所屬系統(tǒng)(是APP端的還是其他關(guān)聯(lián)系統(tǒng))、問題類別(是優(yōu)化類還是bug,不是問題還是重復(fù)記錄的問題等)、嚴(yán)重等級、處理日期、負(fù)責(zé)人,并以狀態(tài)作為持續(xù)更新,便于落地跟進(jìn)。

如果評估結(jié)果為不是問題,無需修改,則需要在備注中說明原因。一來對提出者有個(gè)交代,二來作為備案,方便未來追溯。

04 全民CE效果如何

可能大家會問,這么“興師動眾”的,最終效果怎么樣呢?給大家分享下其中一組全民CE的結(jié)果數(shù)據(jù):眾測周期為其一周, 一共招募到了21位參與人員共提交179個(gè)問題,評估后有效問題112個(gè)。問題迭代修復(fù),在眾測結(jié)束的第二天,優(yōu)化完成度達(dá)到95%。整體數(shù)據(jù)如下:

覆蓋了16款手機(jī)機(jī)型,而我們測試人員正常測試用的手機(jī)是達(dá)不到這個(gè)范圍的:

招募到的21位用戶覆蓋了7類角色,具體構(gòu)成如下:

05 總結(jié)

全民CE雖然在產(chǎn)品質(zhì)量提升上,具有非常顯著的成效,但真正要落地,還需要產(chǎn)品或項(xiàng)目領(lǐng)導(dǎo)的大力支持,也需要產(chǎn)品線各環(huán)節(jié)人員的共同協(xié)作。

只有在大家具備共同立場的前提下,才能做好全民CE, 以更有效有用的定量數(shù)據(jù)作為說服力。

 

本文由@janinejly 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉(zhuǎn)載。

題圖來自Unsplash,基于 CC0 協(xié)議。

更多精彩內(nèi)容,請關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號或下載App
評論
評論請登錄
  1. 邀請用戶來內(nèi)測新軟件是不是有點(diǎn)接近全民CE的概念???

    來自廣東 回復(fù)
    1. 如果按照設(shè)計(jì)者設(shè)定的核心任務(wù)進(jìn)行測試觀察并記錄,屬于可用性測試;如果用戶按照自己的需要點(diǎn)擊反饋問題,那么屬于全民CE。全民CE的用戶數(shù)量更多,要求也沒有那么嚴(yán)格

      來自浙江 回復(fù)
  2. 說白了這些都是為了產(chǎn)品質(zhì)量的提升,做好過程,選對形式真的很重要的說。

    來自江西 回復(fù)
    1. 行家呀

      來自浙江 回復(fù)
  3. 全民走查工具的普遍性更強(qiáng),更具有說服性。但是過程也比較繁瑣而復(fù)雜。

    來自江西 回復(fù)
    1. 難點(diǎn)主要還是上下游跨部門之間的協(xié)作,如果獲得上方支持,那一切都會順利得多

      回復(fù)