本篇主要討論兩個問題：

• 移動情境在移動可用性測試中的考慮
• 使用測試設備還是用戶設備

1 移動情境探討

在移動互聯(lián)網(wǎng)時代，我們可以在任何時間、任何地點使用移動設備，情境相對更為復雜。這里我們定義的移動情境，即用戶使用移動應用和產(chǎn)品時的環(huán)境和狀態(tài)，廣義來講可以是任何影響用戶與移動設備、應用進行交互的事物。諸如導致用戶分心的內(nèi)容、多任務并行的場景、操作時的手勢、低電量的情況和網(wǎng)絡連接環(huán)境等都是典型問題。移動情境具有復雜性、多樣性、多變性等特征，因此研究員和相關學者也非常重視在移動可用性測試中對情境的考慮。Harrison et al.在建立新的移動可用性測試模型PACMAD時，就將情境因素引起的認知負擔納入了其中。 那么移動情境包含哪些內(nèi)容呢？Nadav Savio創(chuàng)建了移動交互情境模型（如下圖）。該模型闡述了影響用戶在使用移動應用時的情境變量，可簡單劃分為三類。

• 第一類可稱為環(huán)境情境，包括用戶所處的環(huán)境、文化規(guī)范及所正在進行的活動；
• 第二類可稱為任務情境，即用戶的使用目標、注意力水平及多任務狀態(tài)；
• 第三類可稱為設備情境，包括用戶所使用的移動設備本身（設備參數(shù)、用戶對設備的熟悉程度等）、網(wǎng)絡連接情況和運營商。所有這些包圍在用戶和設備之間的交叉空間，即移動界面。

第三類設備情境所涉及的“使用測試設備還是用戶設備”的問題，在后面我們將單獨討論。本節(jié)討論的移動情境指的是環(huán)境情境和任務情境。

1.1?評估移動情境對移動可用性測試的重要性

移動情境對于移動應用設計很重要，但其重要程度也會因產(chǎn)品類型和研究目的的不同而不同。

• 根據(jù)產(chǎn)品使用環(huán)境評估移動情境的重要程度

首先需要考慮我們產(chǎn)品的目標用戶通常是在怎樣的情境中使用產(chǎn)品的，據(jù)此再進行有針對性的可用性測試。例如，對于網(wǎng)絡電話App來說，其目標用戶主要是在Wifi環(huán)境下?lián)艽蚓W(wǎng)絡電話，通常是在家里或其他干擾相對較少的環(huán)境下使用，這時的情境相對穩(wěn)定。而對于滴滴打車（下圖）這樣的應用，目標用戶則會更多地在真正的移動情境中使用產(chǎn)品，會受到更多移動情境的影響。

• 根據(jù)可用性測試研究目的來考慮移動情境

考慮移動情境的程度還要結合可用性測試的研究目的。如果產(chǎn)品處在設計初期，需要關注產(chǎn)品整體層面的問題，如導航的合理性、頁面邏輯關系等，這個階段可能只有低保真原型可以用于測試，此時移動情境的重要度可以降低。

如果產(chǎn)品的設計已經(jīng)基本完善，開始進行細節(jié)的修改迭代，且有可用的高保真原型或現(xiàn)成產(chǎn)品，此時需要提升移動情境的重要性。

實際工作中，由于時間和資源的限制，可能無法在一個產(chǎn)品設計周期內(nèi)進行多次可用性測試，在一次可用性測試中可能需要包含多個研究目的，此時需要和團隊溝通清楚測試的主要目的，結合設計階段和測試資源，權衡把握移動情境的重要程度。

1.2?將移動情境納入移動可用性測試方案中

確定了移動情境的重要性后，在設計移動可用性測試方案時如何考慮移動情境？

• 實驗室模擬

傳統(tǒng)的可用性測試大多數(shù)都是在實驗室模擬環(huán)境下進行的。Razak et al.表示實驗室測試有諸多優(yōu)勢。

首先，實驗室測試可以控制研究條件和變量。

其次，所有的被試者都是在相同的受控環(huán)境下進行測試，可以得到更高質(zhì)量的數(shù)據(jù)。

實驗室測試也允許研究人員聚焦于感興趣的現(xiàn)象和問題，更好地收集數(shù)據(jù)，比如對被試者的操作和屏幕的錄制。

但事實上，在實際操作中，實驗室內(nèi)很難模擬真實的用戶情境和周圍的環(huán)境。特別是對移動測試，實驗室內(nèi)缺少相應的情境因素，即使有一定程度的模擬，被試者實際體驗起來也沒那么自然，而且耗時間、花費大。因而在實驗室環(huán)境下進行的移動可用性測試常常被質(zhì)疑。但即使如此，據(jù)統(tǒng)計，71%的移動設備測試都還是在實驗室環(huán)境下進行的。

• 真實環(huán)境

如果是在真實環(huán)境下進行測試，就可以獲得更為自然的移動情境。PC互聯(lián)網(wǎng)產(chǎn)品的使用情境多是工作環(huán)境或家庭環(huán)境，研究人員進入家庭或工作環(huán)境的門檻較高。相比而言，移動互聯(lián)網(wǎng)產(chǎn)品的使用情境可能是隨時隨地的，在真實的環(huán)境下做移動可用性測試的可能性也更高。但在真實環(huán)境下的測試也存在較多劣勢，首先是受控性相對較差，研究人員可能需要處理較多突發(fā)狀況；其次，研究人員挖掘問題的深度和觀察結果的細致性也遠不如實驗室環(huán)境；另外，所有被試者的測試環(huán)境難以統(tǒng)一，結果的橫向比較可能也存在困難。

實驗室模擬和真實環(huán)境各有優(yōu)劣，在實際應用中如何權衡？

• 根據(jù)之前評估的移動情境的重要性來設計測試方案

如果評估產(chǎn)品使用環(huán)境及研究目的后，發(fā)現(xiàn)移動情境非常重要，那么建議著重采用真實環(huán)境下的測試方案。

比如店內(nèi)導購應用的測試，在商店內(nèi)進行會幫我們發(fā)現(xiàn)更多更真實的問題。 如果評估后發(fā)現(xiàn)移動情境的重要性不高或較低，那么建議在模擬情境下進行測試即可。使用相同的受控裝置，我們也可以得到更高質(zhì)量的數(shù)據(jù)。在此基礎上，可以視情況補充少量真實情境的測試，以發(fā)現(xiàn)在實驗室環(huán)境下較難發(fā)現(xiàn)的問題。

但一些特殊的用戶群可能更適合真實環(huán)境測試方案，Oh &Kim表示測試兒童移動產(chǎn)品、了解兒童的需求和問題，最好是進行真實環(huán)境測試。

• 不要為了尋找或創(chuàng)造最佳的情境而阻礙可用性測試的進行

在設計可用性測試方案時，哪怕時間和資源受到限制，也不要為了尋找或創(chuàng)造最佳的情境而阻礙移動可用性測試的進行。

事實上，研究發(fā)現(xiàn)大多數(shù)的用戶其實是擅長想象，并能理解他們可能與移動設備會產(chǎn)生交互的情境的。設置人工情境時，可以不用嚴苛地模擬。比如為了使測試環(huán)境貼近家的感覺，我們可以直接在休息區(qū)的沙發(fā)上進行測試和交流，雖然與用戶實際在家使用的環(huán)境有所不同，但相比到處都是設備的實驗室環(huán)境，測試結果可能更有效。

最后，哪怕條件非常簡陋，幾乎不能考慮情境因素，也不要放棄做可用性測試。因為哪怕只是坐下來和用戶溝通，看看他們?nèi)绾问褂卯a(chǎn)品，或者進行簡單的遠程測試，也會有很多收獲的。

1.3在真實環(huán)境下進行移動可用性測試的經(jīng)驗

在真實環(huán)境下進行移動可用性測試，可能會發(fā)現(xiàn)在設計產(chǎn)品時不會考慮到的，關于噪音、光線和社交狀況等情境問題，這些都可能對最終的產(chǎn)品設計產(chǎn)生比較大的影響。以下是在真實環(huán)境下進行移動可用性測試的一些經(jīng)驗，供參考。

• 與場地方提前協(xié)調(diào)好

在一些特定的公共區(qū)域，如銀行、商場、超市等，在測試前，可能需要和場地方提前溝通協(xié)調(diào)好，確保是在場地方允許的情況下進行。

• 選擇合適的招待物品

實踐發(fā)現(xiàn)，使用一些大家普遍喜歡的小禮物來吸引用戶幫忙測試是很好的辦法，比如玩具公仔等。另外，需要根據(jù)測試環(huán)境和需求選擇合適的吸引和招待用戶的東西，例如，在冬天進行戶外測試時，送上一杯熱飲會是個不錯的選擇。

• 第一句話必須爭取到用戶

通常邀請用戶參與的第一句話可以是：“可以耽誤您10分鐘請你喝一杯茶嗎？”或者是“我們有一個很酷的產(chǎn)品，愿意來試一下嗎？”

• 快速詢問一兩個篩選問題

一旦有用戶感興趣參與進來，接下來需要了解的是，這個用戶是否使用智能手機或者是否經(jīng)常使用智能手機，這時候也可以順手拍一下用戶的手機。然后針對測試目的詢問一兩個簡短的問題，例如，您使用在線銀行嗎？您通過在線預訂方式預訂機票嗎？即使用戶不符合你的目標，也不要讓用戶空手離開，還是可以送小禮物表示感謝。

• 保持測試過程盡量簡短

理想情況下，測試過程最好是5-10分鐘。通常人們不會愿意長時間站在街上和你說話。因此，在真實環(huán)境下做移動可用性測試，一般只能讓用戶做一兩個任務。

• 兩個研究人員結伴做測試

在真實環(huán)境下，如果是一個研究人員，那么沒有辦法在做詳細記錄的同時，還可以注意觀察用戶的操作。因此，最好有一個主持人角色，一個記錄員角色，兩個研究人員結伴做測試。

• 不要假設用戶懂移動相關的術語，例如App Store或iCloud

有研究人員發(fā)現(xiàn)，相比PC互聯(lián)網(wǎng)時代，用戶對移動設備相關的術語、隱喻、交互了解更少。因此，在測試任務中應盡量避免使用術語。

2?使用測試設備還是用戶設備

Schusteritsch et al在其研究中指出，在移動可用性測試中要讓用戶盡可能自然地手持設備，這對獲得用戶與設備準確的交互方式至關重要。要完成這種自然的交互過程，測試設備的選擇是首要的考慮因素，究竟是使用測試設備還是用戶設備？

有研究者指出，要保證被試者能自然地完成任務，就應該盡可能地讓其使用自己的設備。使用被試者自己的設備，一方面可以更真實地模擬使用情境，特別是測試中會涉及其他產(chǎn)品的情況下，例如，使用用戶個性化的輸入法、或是分享到其使用的社交產(chǎn)品中，都可以真實反映被試者如何與產(chǎn)品互動以及如何實現(xiàn)切換等；另一方面，相比統(tǒng)一的測試設備，使用被試者自己的設備測試，可以覆蓋不同的移動系統(tǒng)平臺、不同的屏幕大小和分辨率，可以提供測試設備的多樣性，保證了測試的生態(tài)效度。

在實際測試中，要確定使用測試設備還是用戶設備時，除了考慮模擬使用情境和保證測試生態(tài)效度外，我們建議還可以從以下幾方面去考慮。

• 測試目的

如果本次測試的目的是為了了解用戶是如何使用移動網(wǎng)站或移動App，使用測試設備可能是更好的選擇，讓你能夠更好地控制無關因素的干擾，專注于被試者與移動產(chǎn)品之間的交互行為；但如果本次測試的目的并不局限于行為層面的考察，例如，測試目的還想了解被試者是否能夠在他們習慣的產(chǎn)品下載渠道中正常下載目標產(chǎn)品，產(chǎn)品在不同設備上的適配性和表現(xiàn)如何，那么使用用戶設備才是更好的選擇。

• 測試對象是產(chǎn)品還是原型

如果測試處于產(chǎn)品設計前期，希望通過可用性測試快速發(fā)現(xiàn)問題，并制作了產(chǎn)品原型進行測試。因為時間限制和預裝系統(tǒng)環(huán)境限制等因素，測試原型可能難以預裝到每個用戶的設備中。這時使用預裝好的統(tǒng)一測試設備會是更好的選擇。（蘋果的Testflight是在App發(fā)布前測試的解決方案之一）

• 第三方工具限制

相較于PC可用性測試，移動可用性測試的錄屏和記錄更加困難。如果要錄制被試者操作任務的屏幕和過程，需要一些第三方的鏡像產(chǎn)品、錄屏產(chǎn)品等來配合使用（具體工具的使用，在第三篇中有詳細闡述）。這些第三方工具的使用，需要預裝和調(diào)試。因此，不便于使用用戶設備。另外，如果明確讓被試者知道有錄屏軟件在錄制自己的操作行為，測試數(shù)據(jù)的有效性可能會降低。

• 被試者的學習成本和使用習慣

移動設備因系統(tǒng)的多樣性和設置的個性化而存在一定的復雜性。面對一臺新的移動設備，用戶需要進行一定程度的學習。有些被試者對新設備的學習成本會比較高，例如，被試者是老年人，他們通常需要很長時間才能學會使用自己的手機，因此讓這類被試者使用統(tǒng)一的測試設備，并不是很好的選擇。

• 被試者對設備的習慣問題

移動設備具備個性化，特別是智能手機，已經(jīng)成為個體的延伸。使用統(tǒng)一的測試設備，即使被試者的學習成本較低，還存在習慣問題。被試者不習慣統(tǒng)一的測試設備，可能會導致以下兩個的問題：一方面會增加被試者在測試過程中的緊張情緒；另一方面會降低被試者完成任務的效率。

• 被試者的隱私和意愿

移動設備比PC更能夠代表個體，存在很多被試者的隱私信息和一些個性化的內(nèi)容。被試者有時會不愿意使用他們自己的設備進行測試。如果想要使用被試者自己的設備進行測試，需要提前獲得被試者的許可，在招募階段就需要考慮這個因素，和被試者打好招呼。

• 場外干擾因素

使用被試者自己的設備進行測試會帶來一個問題，在測試過程中很容易受到一些不可控因素的干擾，比如突然的來電、第三方軟件的干擾、電量不足等問題，也很難提前準備和應對。而如果使用統(tǒng)一的測試設備，這些問題就可以更好的避免。 接下來兩篇我們分別討論：

• 現(xiàn)場測試方法和工具
• 移動遠程測試探索

3?參考

• Munesh Chandra and Mohammadi Akheela Khanum, “Role of Context in Usability evaluations: A Review”
• Harrison et al., “Usability of mobile applications: literature review and rationale for a new usability model”
• Nadav Savio, Jared Brauterman PhD, “Design Sketch: The Context of Mobile Interaction”
• Razak, F.H.A., Hafit, H., Sedi, N., Zubaidi, N.A.,Haron,? “Usability testing with children: Laboratory vs field studies”
• Oh, K., & Kim, “Social Attributes of Robotic Products: Observations of Child-Robot Interactions in a School Environment”
• Pamela Pavliscak,”Making the Most Out of Mobile Testing”
• Rudy Schusteritsch,Carolyn Y. Wei,Mark LaRosa,”Towards the perfect infrastructure for usability testing on mobile devices”

查看更多：

移動可用性測試（一）：概述

來源：騰訊ISUX