文章是作者在經(jīng)過(guò)前后三次可用性測(cè)試后總結(jié)的一些經(jīng)驗(yàn)，enjoy~

身在傳統(tǒng)制造業(yè)外企，身邊并沒(méi)有像互聯(lián)網(wǎng)公司的用戶體驗(yàn)團(tuán)隊(duì)，因此擔(dān)著“用戶體驗(yàn)設(shè)計(jì)師”的title，常常需要肩負(fù)起各類(lèi)的職責(zé)，這其中就包括用戶研究。 雖然曾經(jīng)在設(shè)計(jì)咨詢(xún)公司有過(guò)focus group和家訪的經(jīng)歷，但和可用性測(cè)試有很大的不同， 因此也只好摸著石頭過(guò)河，一邊做一邊找資料一邊積累經(jīng)驗(yàn)啦。

本文是我在經(jīng)過(guò)前后三次可用性測(cè)試后總結(jié)的一些經(jīng)驗(yàn)，不對(duì)的地方希望大家指出啦。

簡(jiǎn)單介紹下三次可用性測(cè)試的基本情況：

1. 第一次可用性測(cè)試——C端用戶App v0.1，10個(gè)參與者；
2. 第二次可用性測(cè)試——C端用戶App v0.2，10個(gè)參與者；
3. 第三次可用性測(cè)試——B端用戶網(wǎng)站，5個(gè)參與者。

（說(shuō)明：根據(jù)尼爾森的研究，5個(gè)可用性測(cè)試參與者就可以發(fā)現(xiàn)80%以上的問(wèn)題，由于我司產(chǎn)品為前所未有的創(chuàng)新產(chǎn)品，因此在投入上做了一定的增加）

正文從招募用戶、測(cè)試大綱的準(zhǔn)備、測(cè)試現(xiàn)場(chǎng)、測(cè)試結(jié)果整理等四個(gè)方面來(lái)講。

一、招募用戶

1. 招募方式

由于我們的測(cè)試需要在一些特定的小區(qū)進(jìn)行，我們?cè)谇捌诓捎昧嗽谛^(qū)內(nèi)張貼海報(bào)的形式來(lái)招募用戶。在海報(bào)上會(huì)對(duì)活動(dòng)的形式、時(shí)間地點(diǎn)、獎(jiǎng)勵(lì)等內(nèi)容做出說(shuō)明，同時(shí)附上活動(dòng)群二維碼，感興趣的用戶可以掃碼加入微信群。

本以為會(huì)有很多人報(bào)名，因?yàn)闇y(cè)試地點(diǎn)就在樓下，并且有獎(jiǎng)勵(lì)，但海報(bào)招募的方式并不理想，因?yàn)楹芏嗳瞬⒉粫?huì)關(guān)注海報(bào)。

因此我們又增加了一種招募方式——請(qǐng)物業(yè)幫忙在業(yè)主群里宣傳，這種方式招到了很多用戶，可見(jiàn)使用合適的招募方式是很重要的。

在招募時(shí)最好預(yù)留充足的時(shí)間，這樣可以在招募效果不理想時(shí)及時(shí)切換招募方式。

2. 招募注意事項(xiàng)

招募用戶時(shí)最多的問(wèn)題發(fā)生在篩選用戶的條件上，常規(guī)的年齡、性別等指標(biāo)在這里就不再贅述了，我只列舉一些大家經(jīng)常忽略但極有可能發(fā)生的情況。

（1）考慮用戶的方言問(wèn)題

在第一次測(cè)試時(shí)由于客觀原因的限制，測(cè)試的小區(qū)為北方某二線城市的一個(gè)小縣城中高檔小區(qū)。在微信群里招募到足夠的用戶后，測(cè)試當(dāng)天傻了眼，10個(gè)用戶里有7.8個(gè)都講當(dāng)?shù)胤窖?，不講普通話，因此整個(gè)測(cè)試過(guò)程中全靠猜測(cè)才能勉強(qiáng)和用戶溝通，產(chǎn)生了很大的障礙。因此在測(cè)試時(shí)最好可以電話和用戶進(jìn)行提前溝通，以避免方言問(wèn)題。

（2）選擇性格開(kāi)朗、表達(dá)流利的用戶

除去方言外，另一個(gè)溝通方面的障礙就是表達(dá)問(wèn)題，有些用戶由于害羞或不善言辭，在測(cè)試過(guò)程中會(huì)需要大量的引導(dǎo)。這類(lèi)用戶也可以在前期溝通時(shí)避免。

（3）拒絕不符合要求的用戶時(shí)，措辭要注意

因?yàn)榍捌谡心挤绞降牟煌械娜藷o(wú)需注意該項(xiàng)，比如通過(guò)網(wǎng)絡(luò)填寫(xiě)信息的方式，只要篩選出符合的參與者即可。我們采用的微信群招募的方式，需要進(jìn)一步和進(jìn)群的人進(jìn)行溝通以了解他們的條件是否符合招募要求，這時(shí)的措辭就格外的重要。

在招募時(shí)，我們有一個(gè)條件是“年齡45歲以下”，當(dāng)時(shí)有個(gè)60歲的大叔來(lái)報(bào)名，招募人員非常實(shí)在地告訴大叔年齡不符合需求，結(jié)果大叔情緒激動(dòng)的說(shuō)，“周末砸了你們場(chǎng)子”。

事后反思，對(duì)別人說(shuō)需求不滿足的話的確比較容易引起別人的反感，因此，可以不必那么實(shí)在，而是采用更加迂回的方式，比如：“不好意思，我們這次招募是先到先得，下次有相同的活動(dòng)我們會(huì)優(yōu)先通知您。”

二、測(cè)試大綱的準(zhǔn)備

1. 測(cè)試大綱的內(nèi)容

主持人首先需要對(duì)本次活動(dòng)進(jìn)行說(shuō)明，例如目的、形式、時(shí)間等等，同時(shí)需要在開(kāi)始時(shí)征得被試者對(duì)于錄音錄像的同意，簽署NDA等。完成說(shuō)明后就可以進(jìn)入正式的測(cè)試環(huán)節(jié)了。

測(cè)試大綱基本結(jié)構(gòu)

測(cè)試整體分為三個(gè)部分，Pretest、Test和Post-test。

Pretest中會(huì)涉及到被試者的基本信息，例如年齡段、相關(guān)產(chǎn)品使用經(jīng)驗(yàn)等，這些內(nèi)容和后面的測(cè)試環(huán)節(jié)是相關(guān)聯(lián)的。如果我們發(fā)現(xiàn)一個(gè)人在操作上出現(xiàn)了問(wèn)題，那么原因可能是設(shè)計(jì)的不到位，也有可能是他缺乏相關(guān)產(chǎn)品的使用經(jīng)驗(yàn)，這個(gè)就是從pretest中得到的。

Test環(huán)節(jié)一般會(huì)根據(jù)測(cè)試的目的和內(nèi)容分為幾個(gè)任務(wù)，在每個(gè)任務(wù)中，參與者會(huì)根據(jù)主持人的指令完成一些操作，并對(duì)操作進(jìn)行打分。例如：“請(qǐng)?jiān)贏PP中完成登錄操作”是一個(gè)任務(wù)，主持人在參與者操作的過(guò)程中需要錄像（經(jīng)過(guò)允許后），記錄其完成的時(shí)間、完成過(guò)程中的不尋常的操作，然后再詢(xún)問(wèn)被試者原因。

可參考如下形式：

Post-test時(shí)一般會(huì)問(wèn)一些整體和綜合性的問(wèn)題，例如App整體的界面是否友好，對(duì)App的滿意度，App最（不）吸引人的特征，想修改App的什么特征等等，方便得出整體的評(píng)價(jià)和打分情況。

2. 測(cè)試大綱注意事項(xiàng)

完成測(cè)試大綱的基本結(jié)構(gòu)后，還有很多細(xì)節(jié)內(nèi)容需要修改和潤(rùn)色，以下詳細(xì)展開(kāi)。

（1）增加發(fā)聲思考練習(xí)

在第一次測(cè)試的過(guò)程中，我發(fā)現(xiàn)有些參與者想要表達(dá)但是不知道如何表達(dá)，有些參與者則比較害羞，參與者話少會(huì)導(dǎo)致用戶反饋的質(zhì)量降低。因此在第二次測(cè)試的過(guò)程中，我在Pre-test的環(huán)節(jié)中增加了發(fā)聲思考的練習(xí)，測(cè)試的質(zhì)量有了提升。發(fā)聲思考的時(shí)候主持人可以先給參與者做個(gè)示范，然后再打開(kāi)某個(gè)常用的App或網(wǎng)站引導(dǎo)參與者自己做一次嘗試。

（2）在設(shè)計(jì)測(cè)試大綱時(shí)，要想清楚問(wèn)題的目的

有的問(wèn)題是沒(méi)有答案的，或有了答案并不能做什么，這種問(wèn)題就是無(wú)用的。例如：第一次測(cè)試的時(shí)候，工程師要求我在大綱中加入手機(jī)運(yùn)營(yíng)商的問(wèn)題（移動(dòng)、聯(lián)通還是電信），目的是看他們是否能收到驗(yàn)證碼短信，但是否能收到短信我們通過(guò)觀察就可以看到，而不必要細(xì)分到是什么運(yùn)營(yíng)商，即使知道了結(jié)果也不能用于改進(jìn)，這個(gè)問(wèn)題就是無(wú)用的問(wèn)題。

（3）任務(wù)劃分要合適

對(duì)于測(cè)試環(huán)節(jié)中參與者要完成的任務(wù)，既不可太復(fù)雜，也不可太輕松。如果太復(fù)雜，參與者可能中途忘記自己要干嘛，如果太簡(jiǎn)單，結(jié)果可能是參與者直接跟著指令來(lái)操作。

因此，任務(wù)劃分是一門(mén)藝術(shù)，對(duì)后面結(jié)果的分析非常重要。另外，若測(cè)試過(guò)程中有多個(gè)任務(wù)，那么各個(gè)任務(wù)的scope要接近，如果相差過(guò)大，比如有的任務(wù)10秒能完成，而有的任務(wù)要3分鐘，很有可能造成每個(gè)任務(wù)分值懸殊的結(jié)果。

（4）明確是可用性測(cè)試還是市場(chǎng)測(cè)試

這個(gè)問(wèn)題歸根到底還是測(cè)試的目的。在測(cè)試之前，一定要了解清楚老板想要的是什么數(shù)據(jù)，是技術(shù)可靠性、是市場(chǎng)接受度、還是app的可用性？

不一樣的目的需要的方法是完全不一樣的，得到的結(jié)果也是完全不一樣的。若幾個(gè)數(shù)據(jù)老板都想要，那么就要分清楚哪個(gè)是主要數(shù)據(jù)，那么大綱就要圍繞主要數(shù)據(jù)展開(kāi)，穿插一些其他數(shù)據(jù)。

（5）事先要進(jìn)行預(yù)演

在大綱完成后，一定一定要找不了解項(xiàng)目的人做真實(shí)的預(yù)演。

預(yù)演有幾個(gè)目的：

1. 校正大綱中預(yù)定的不合適的時(shí)間，起到時(shí)間控制的目的；
2. 若在app使用過(guò)程中有使用場(chǎng)景/場(chǎng)地的變換，需要在大綱中做出明確標(biāo)識(shí)，預(yù)演可以發(fā)現(xiàn)不到位的地方；
3. 大綱在準(zhǔn)備的過(guò)程中使用的是書(shū)面語(yǔ)言，而訪談使用的往往是口語(yǔ)，經(jīng)過(guò)預(yù)演后，能夠發(fā)現(xiàn)大綱在語(yǔ)言上可以修改潤(rùn)色的地方。

（6）采用更合適的問(wèn)法

在設(shè)計(jì)大綱時(shí)，語(yǔ)言的表述是非常重要的，同一個(gè)問(wèn)題采用不同的表述方式，得到的答案可能大相徑庭。

舉個(gè)例子：

“您平時(shí)的主要工作是什么？”

“就是普通的文職啊”

換個(gè)問(wèn)法后：

“您的日常工作主要會(huì)涉及到哪些？”

“管理門(mén)禁系統(tǒng)、巡視啊等等”

所以不同的問(wèn)題可能會(huì)得到完全不同的答案。在設(shè)計(jì)問(wèn)題時(shí)，可以自己先預(yù)想一下會(huì)得到什么樣的答案，對(duì)問(wèn)題的設(shè)定是有幫助的。

（7）酌情增加啟發(fā)性問(wèn)題

啟發(fā)性問(wèn)題可以幫助我們發(fā)現(xiàn)真實(shí)用戶的潛在需求，進(jìn)一步提升產(chǎn)品。比如：“您是否可以描述一下您的一個(gè)普通的工作日？您在一天的工作中會(huì)做什么？”，發(fā)現(xiàn)了一些洞察點(diǎn)之后可以繼續(xù)深挖。

再比如：“平時(shí)是否會(huì)用到某軟件？是否可以實(shí)際操作演示一下？”這個(gè)問(wèn)題可以幫助我們了解類(lèi)似產(chǎn)品的使用情況，進(jìn)而借鑒優(yōu)秀的地方，規(guī)避有問(wèn)題的地方。

三、測(cè)試現(xiàn)場(chǎng)

如果在前期經(jīng)過(guò)了充分的準(zhǔn)備，那么在測(cè)試現(xiàn)場(chǎng)不會(huì)發(fā)生大的問(wèn)題，但這并不意味著萬(wàn)事大吉了，還有很多需要注意的地方呢。

（1）心中有大綱，現(xiàn)場(chǎng)就不慌

在真實(shí)測(cè)試之前，一定要做到對(duì)測(cè)試大綱很熟悉。大家都知道，在測(cè)試的時(shí)候需要主持人具有很強(qiáng)的洞察力，發(fā)現(xiàn)參與者不尋常的行為、語(yǔ)言并深入探究原因。如果主持人對(duì)測(cè)試大綱不熟悉，他就會(huì)拿出相當(dāng)一部分精力，思考或?qū)ふ蚁乱粋€(gè)問(wèn)題是什么，這樣可能會(huì)影響關(guān)鍵洞察的發(fā)現(xiàn)。

另外一方面，如果主持人頻繁查看訪談大綱，也會(huì)給參與者留下不專(zhuān)業(yè)的印象，同時(shí)會(huì)使自己緊張，影響測(cè)試現(xiàn)場(chǎng)的發(fā)揮。對(duì)大綱越熟悉，就越胸有成竹，越有足夠的精力發(fā)現(xiàn)關(guān)鍵洞察。

（2）認(rèn)真體會(huì)參與者的心理，及時(shí)調(diào)整問(wèn)題

在第三次測(cè)試時(shí)，針對(duì)的是B端網(wǎng)站的測(cè)試，有一個(gè)參與者是一個(gè)20多歲的年輕小姑娘，在物業(yè)做文職工作。在訪談她時(shí)，有一個(gè)問(wèn)題是請(qǐng)她描述一個(gè)普通工作日會(huì)做哪些工作。

參與者起初說(shuō)“就是普通的文職”，后來(lái)表現(xiàn)出了不愿意講的情緒“不知道怎么講”，最后直接說(shuō)“過(guò)吧”。測(cè)試后整理時(shí)，我發(fā)現(xiàn)是我在現(xiàn)場(chǎng)沒(méi)有及時(shí)發(fā)現(xiàn)參與者的情緒，反思后，猜測(cè)可能是她自身不滿意年輕卻安逸的工作現(xiàn)狀，所以不愿意說(shuō)出自己寥寥無(wú)幾的工作內(nèi)容。如果能及時(shí)體會(huì)到參與者的心理并調(diào)整問(wèn)題，就會(huì)化解參與者的尷尬，調(diào)整氛圍。

（3）維持好現(xiàn)場(chǎng)秩序

如果測(cè)試是在會(huì)議室等地進(jìn)行，現(xiàn)場(chǎng)不需要太多的維持秩序工作。由于我們產(chǎn)品的特殊性，測(cè)試只能在小區(qū)進(jìn)行，因此在測(cè)試時(shí)會(huì)有很多好奇的人前來(lái)詢(xún)問(wèn)和觀察，這會(huì)大大影響參與者的發(fā)揮。因此，現(xiàn)場(chǎng)的秩序維持工作是非常重要的。

（4）提前和參與者double-check以防出現(xiàn)意外

請(qǐng)務(wù)必提前多次和參與者確認(rèn)他是否能準(zhǔn)時(shí)參加，如果不行，及時(shí)增加替補(bǔ)。

（5）保留多個(gè)錄音備份

這個(gè)點(diǎn)很重要了，第一次測(cè)試時(shí)我們的錄音筆發(fā)生了故障，導(dǎo)致丟失了多個(gè)錄音文件，只好根據(jù)大綱筆錄回憶用戶說(shuō)了什么。

四、測(cè)試結(jié)果整理

測(cè)試完成之后還有一個(gè)重要的部分，就是測(cè)試結(jié)果的整理。

（1）提前設(shè)計(jì)數(shù)據(jù)整理表格

這三次可用性測(cè)試之后，體會(huì)很深的一點(diǎn)是：不同的人需要的是不同的數(shù)據(jù)。例如：對(duì)于我們用戶體驗(yàn)設(shè)計(jì)師來(lái)說(shuō)，希望得到的是可用性數(shù)據(jù)；對(duì)于技術(shù)人員來(lái)說(shuō)，希望得到的是技術(shù)可行性數(shù)據(jù)；對(duì)于市場(chǎng)人員來(lái)說(shuō)，希望得到的是市場(chǎng)數(shù)據(jù)……

測(cè)試可以采集到的各種數(shù)據(jù)可以說(shuō)非常的多，而我們要做到抓取不同的數(shù)據(jù)給不同的人。因此，提前設(shè)計(jì)數(shù)據(jù)整理表格非常的重要且必要，它可以幫助我們理清思維，明確測(cè)試要的是什么，也可以反過(guò)來(lái)完善大綱內(nèi)容，避免遺漏必要的問(wèn)題。此處的表格應(yīng)盡量詳細(xì)，做完后提前和相關(guān)人士進(jìn)行溝通是否全面。

（2）做好表格中的分類(lèi)項(xiàng)

統(tǒng)計(jì)數(shù)據(jù)時(shí)，我們使用的是excel，在excel的表格中做好分類(lèi)項(xiàng)對(duì)我們非常的有用。例如：對(duì)于每一個(gè)用戶體驗(yàn)相關(guān)的問(wèn)題，可以把它分類(lèi)到某個(gè)任務(wù)或產(chǎn)品模塊，對(duì)于出現(xiàn)的bug，可以把它的操作系統(tǒng)是iOS或是安卓進(jìn)行分類(lèi)，這樣分類(lèi)后，可以在后期輕松的從更高的角度看到每個(gè)模塊（操作系統(tǒng)）出現(xiàn)問(wèn)題的多少，進(jìn)而明確后期優(yōu)化的重點(diǎn)。

（3）原始數(shù)據(jù)原樣記錄

在進(jìn)行數(shù)據(jù)整理之前，我的習(xí)慣是先把原始數(shù)據(jù)完整記錄下來(lái)，比如：半個(gè)小時(shí)的錄音，就把主持人和參與者說(shuō)了什么完整的寫(xiě)下來(lái)。這個(gè)過(guò)程切記不要翻譯，原話是什么就寫(xiě)什么。雖然這個(gè)工作繁瑣且沒(méi)有什么技術(shù)含量，但可以大大提高后面數(shù)據(jù)整理時(shí)的工作效率，忘記時(shí)也可以回過(guò)頭來(lái)查看。

以上就是我在三次可用性測(cè)試中得到的一些體會(huì)，大部分是比較零碎細(xì)小的點(diǎn)，歡迎大家補(bǔ)充。但我的收獲絕不僅僅是學(xué)會(huì)了如何做可用性測(cè)試，而是掌握了用可用性測(cè)試的思維來(lái)反思自己設(shè)計(jì)的方法，能夠站在一個(gè)新手的角度考慮設(shè)計(jì)，例如在我準(zhǔn)備測(cè)試大綱的過(guò)程中，就提前發(fā)現(xiàn)了app在新手引導(dǎo)部分的不足。

最后，多實(shí)踐才能做好可用性測(cè)試和訪談，也希望大家在設(shè)計(jì)時(shí)，能夠腦補(bǔ)下可用性測(cè)試的過(guò)程，來(lái)發(fā)現(xiàn)自己設(shè)計(jì)中的改進(jìn)點(diǎn)。

作者：Vicky Yang，知乎：Vicky Yang。

本文由 @Vicky Yang 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可，禁止轉(zhuǎn)載

題圖來(lái)自Unsplash，基于CC0協(xié)議