當你需要關(guān)于自己產(chǎn)品的用戶體驗數(shù)據(jù)時，然而，你卻不知道從哪里獲?。磕敲词紫?，你需要選擇正確的研究方法。接下來，我們來看看這些當下最流行的定量研究方法。

許多用戶體驗專家傾向于采用定性的研究方法，原因在于他們認為：定性的研究方法要比定量的研究方法更容易操作和節(jié)約成本。其實，他們忽略了與定量分析聯(lián)系緊密的大樣本量以及數(shù)據(jù)統(tǒng)計的巨大前景。

如果你也是這樣認為的，那你也就錯了！定量的研究方法是任何有經(jīng)驗的UX研究人員必須掌握的重要技能。定量用戶研究的方法允許你做以下事情：

1. 用一個數(shù)值來表示你產(chǎn)品的可用性。數(shù)值有時比質(zhì)量檢測的結(jié)果和視頻更有說服力（特別是當你試圖說服像高管這樣的人）時。
2. 比較不同的設(shè)計（比如，你的產(chǎn)品的新舊版本，或者是你的產(chǎn)品與競爭對手的產(chǎn)品相比），并且確定你觀察到的差異是否具有統(tǒng)計學意義，而不是隨機的。
3. 改進用戶體驗權(quán)衡決策。比如，如果預(yù)期的設(shè)計改進成本很高，那么它值得做嗎？如果你已經(jīng)想到這種改變會提高可用性，那么定量研究方法可以幫助你驗證重新設(shè)計是否值得。
4. 將用戶體驗的改進與企業(yè)目標以及關(guān)鍵績效指標結(jié)合起來（從而證明你的投資回報并且證明你的用戶體驗團隊存在的價值）。

這篇文章可以讓你清楚的知道，用戶研究的第一步是：確定要使用哪種定量的研究方法。接下來，我們將會給大家介紹一些當下最流行的定量研究方法：

1. 定量可用性測試（基本測試）
2. 網(wǎng)站分析（或APP分析）
3. A/B測試或者多變量測試
4. 卡片分類法
5. 樹狀測試
6. 調(diào)研或者問卷調(diào)查
7. 聚類定性評價
8. 滿意度調(diào)研
9. 眼動測試

以上每種方法都會產(chǎn)生有價值的定量數(shù)據(jù)，但是這些方法在收集的數(shù)據(jù)類型以及所需的資源和工作量方面差別很大。

一、九種定量用戶研究方法概述

本文列出了這些方法最常見的示例，并對每種方法的成本和難度進行了評估。與其它任何研究方法一樣，這些方法中的每一種都可以適用各種不同的需求。

根據(jù)具體情況，你的成本和困難可能與我們的粗略估計有所不同。此外，你應(yīng)該意識到，這些方法中的每一種都需要不同的最小樣本量來確定統(tǒng)計的意義。

1.定量可用性測試（基本測試）：

• 用途：隨著時間的推移跟蹤可用性；與競爭對手比較。
• 成本：中等
• 收集難度：中等
• 分析難度：中等
• 方法類型：行為（用戶做了什么？）
• 使用的情境：基于任務(wù)

盡管不常用，但是，定量可用性測試（有時也稱為可用性基準測試）與定性可用性測試其實非常相似：兩種方法都要求用戶使用產(chǎn)品去執(zhí)行實際的任務(wù)。兩者的主要區(qū)別在于：定性可用性測試優(yōu)先考慮如何觀察用戶行為，比如，識別可用性問題。相比之下，定量可用性測試的重點則是收集數(shù)據(jù)指標，比如任務(wù)時間或者成功率。

一旦你收集了相對較大的樣本量（大約35個或者更多），你就可以使用它們來跟蹤產(chǎn)品的可用性，或者將其與競爭對手產(chǎn)品的可用性進行比較。

如果在產(chǎn)品的迭代過程中，你一直追蹤著一些產(chǎn)品的可用性指標，那么你就可以創(chuàng)建一張類似這樣的趨勢圖。這種類型的信息可以幫助你持續(xù)關(guān)注產(chǎn)品的用戶體驗，并確保它隨著時間的推移而逐步改進。

你所選擇的可用性測試的類型（現(xiàn)場測試、遠程引導(dǎo)測試或遠程無引導(dǎo)測試）將對成本產(chǎn)生影響，并且難以與此方法相關(guān)聯(lián)。由于定量和定性可用性研究的目標不同，測試的結(jié)構(gòu)和進行的任務(wù)也需要有所不同。

2.網(wǎng)站分析（或者APP分析）：

• 用途：發(fā)現(xiàn)問題或確定問題的輕重緩急；監(jiān)測性能。
• 成本：低
• 收集難度：低
• 分析難度：高
• 方法類型：行為（用戶做了什么？）
• 使用情境：現(xiàn)場

分析數(shù)據(jù)，描述了用戶使用線上產(chǎn)品的各種操作行為，比如，他們?nèi)チ四睦?，點擊了什么，使用了什么功能，他們從哪里來以及到哪里去。這些信息可以幫助你做各種各樣的用戶體驗活動。特別是，它可以幫助你監(jiān)測各種內(nèi)容、UI或產(chǎn)品功能，并識別哪些不能正常運行。

3.A/B測試或者多變量測試：

• 用途：對比兩種設(shè)計方案
• 成本：低
• 收集難度：低
• 分析難度：低
• 方法類型：行為（用戶做了什么？）
• 使用情境：現(xiàn)場

雖然，你可以使用分析指標來監(jiān)控產(chǎn)品的性能（如上所述），但你也可以創(chuàng)建一些實驗，來檢測不同的UI設(shè)計，然后，通過A/B測試或多變量測試來改變這些指標。

在A/B測試中，團隊需要創(chuàng)建同一界面的兩個不同的最新版本，然后將每個版本展示給不同的用戶，用來確定哪個版本的性能更好。

例如，你可以創(chuàng)建同一個操作按鈕標簽的兩個版本：“獲得定價”或“學習更多”。然后，你就可以跟蹤統(tǒng)計兩個版本中按鈕的點擊次數(shù)。多變量測試的操作方式也是類似的，但是，它與A/B測試不同的是：多變量測試需要同時測試多個不同的設(shè)計元素（例如，測試可能涉及不同的按鈕標簽、排版和頁面上的位置）。

這兩個基于分析的實驗，對于決定同一個設(shè)計的不同變體非常有用，并且可以結(jié)束團隊關(guān)于哪個版本最好的爭論。

A/B測試是將網(wǎng)站流量（用戶）拆分為兩部分：一部分導(dǎo)入到A方案，另一部分則導(dǎo)入到B方案。

這種方法的一個主要缺點是：它經(jīng)常會被濫用。有些團隊沒有盡可能長時間地運行測試，收集不到足夠的樣本，就匆忙的下了結(jié)論，這樣的結(jié)論往往失敗的風險很大。

4.卡片分類法：

• 用途：確定信息架構(gòu)的標簽和結(jié)構(gòu)
• 成本：低
• 收集難度：低
• 分析難度：中
• 方法類型：態(tài)度（用戶說了什么？）
• 使用情境：不使用產(chǎn)品

在卡片分類研究中，參與者會拿到一些內(nèi)容項（有時是寫在索引卡上的），并要求以一種對他們有意義的方式對這些項目進行分組和標注。這個測試既可以親自進行，也可以使用物理卡片或者使用類似于OptimalSort這樣的卡片排序平臺進行遠程測試。

當卡片排序測試是親自進行時，用戶對物理卡片進行排序和分類，每張卡片都包含了它所代表的內(nèi)容的描述。

這個方法可以讓你有機會了解用戶的心理模型。他們使用什么術(shù)語？他們是如何將這些概念組合在一起的？

對創(chuàng)建類似分組的參與者的百分比進行定量分析，可以幫助確定哪種分類方法對大多數(shù)用戶來說是可以理解的。

5.樹狀測試：

• 用途：評估信息架構(gòu)的層次結(jié)構(gòu)
• 成本：低
• 收集難度：低
• 分析難度：中
• 方法類型：行為（用戶做了什么？）
• 使用情境：基于任務(wù)而不是使用產(chǎn)品

在樹狀測試中，會讓參與者嘗試使用網(wǎng)站的分類結(jié)構(gòu)來完成任務(wù)。這種方法本質(zhì)上是一種評估界面信息架構(gòu)的方法，通過這種方法可以將界面上的其它信息區(qū)分開來。

例如，假設(shè)你的產(chǎn)品是一個寵物用品網(wǎng)站，而這是它頂層的層次結(jié)構(gòu)。

網(wǎng)站信息層次結(jié)構(gòu)的顯示可能看起來是這樣的，樹狀測試要求參與者在這樣的層次結(jié)構(gòu)中找到一個特定的條目（例如，項圈），他們首先看到的只是頂層的分類（例如，狗狗、貓咪、小鳥等）。一旦他們做出一個選擇（例如，狗狗），就會看到自己選擇相應(yīng)選項的子類別。

你可以要求你的參與者在一個任務(wù)中找到狗項圈。對樹狀測試結(jié)果的定量分析將顯示人們是否能夠在信息層次結(jié)構(gòu)中找到該項的正確路徑，以及可以確定有多少參與者選擇了錯誤的類別。

這種方法有助于確定界面信息架構(gòu)的結(jié)構(gòu)、文案以及放置的位置是否符合用戶的心理預(yù)期。

6.調(diào)研或者問卷調(diào)查：

• 用途：收集調(diào)研用戶的態(tài)度和行為信息
• 成本：低
• 收集難度：低
• 分析難度：低
• 方法類型：態(tài)度（用戶說了什么）
• 使用情境：任何

問卷調(diào)查是一種靈活的用戶研究工具。你可以在不同的環(huán)境中進行測試，比如，在一個實時網(wǎng)站、電子郵件或可用性測試之后進行簡短的攔截調(diào)查。

調(diào)研時可以同時獲得定量和定性的數(shù)據(jù)，比如評分、多項選擇題中的答案的比例，再加上開放式問題的答案。你甚至可以把對調(diào)查的定性回答轉(zhuǎn)化為數(shù)字數(shù)據(jù)(參見下面的代碼質(zhì)量評論部分)。

像這樣的語義差別等級量表，每個單選按鈕代表一個數(shù)值。被調(diào)研的用戶可以選擇：1.容易使用；5.難以使用；或選擇介于兩者之間的選項。對這個問題的平均回答來衡量你的應(yīng)用程序在使用上的難易程度。

你可以創(chuàng)建自己的自定義問卷，也可以使用其它已經(jīng)建好的問卷模版（例如，系統(tǒng)可用性量表或網(wǎng)絡(luò)推廣者評分）。

問卷的一個優(yōu)點是：可以經(jīng)常將你的調(diào)研結(jié)果與行業(yè)或競爭者的分數(shù)進行比較，看看你做得怎么樣。即使你創(chuàng)建了自己的自定義問卷，也可以隨時間的推移對自己產(chǎn)品平均分數(shù)進行追蹤，來監(jiān)控產(chǎn)品的改進情況。

7.聚類定性評價：

• 用途：確定定性數(shù)據(jù)中的重要主題
• 成本：低
• 分析難度：中
• 收集難度：中
• 分析類型：態(tài)度（用戶說了什么？）
• 使用情境：任何

這種技術(shù)不是數(shù)據(jù)收集的方法，而是定性數(shù)據(jù)的分析方法，它包括根據(jù)共同主題對定性研究（例如日記研究、調(diào)查、焦點小組或訪談）的觀察結(jié)果進行分組。如果你進行了大量的觀察，你就可以計算出一個特定主題被提及的實際數(shù)量。

例如，假設(shè)你做了一個日記本研究，讓參與者在他們的日常生活中，每周都要報告他們使用產(chǎn)品的時間，目的是理解他們使用產(chǎn)品的背景，你可以算一下用戶在工作、家中或外出的時候使用產(chǎn)品的比例。

這種方法可以識別特定主題或情況的流行程度或頻率，例如，用戶抱怨的頻率或UI問題。

這種方法可以很好地從大量的定性信息中挖掘數(shù)值數(shù)據(jù)，但它可能耗時會非常長。

8.滿意度調(diào)研：

• 用途：確定與你的產(chǎn)品或品牌相關(guān)的屬性
• 成本：低
• 分析難度：低
• 收集難度：低
• 分析類型：態(tài)度（用戶說了什么？）
• 使用情境：基于任務(wù)

定量可用性測試試圖使用量化的方式來衡量產(chǎn)品的質(zhì)量，比如：審美情趣、品牌實力、語氣等。這些研究可以根據(jù)你的研究問題進行定制，但這些方法通常會首先讓參與者接觸到產(chǎn)品（通過向他們展示靜態(tài)圖片或者要求他們使用現(xiàn)場產(chǎn)品或原型）。然后，要求用戶通過從描述性的詞語列表中選擇一個來描述當前設(shè)計。

如果你獲取自身目標用戶的樣本量足夠大，那么整體趨勢就會顯示出來。例如，你可能會有84%的受訪者將此設(shè)計描述為“最新”。

9.眼動研究：

• 用途：確定哪些UI元素是分散注意力的、可發(fā)現(xiàn)的或可找到的
• 成本：高
• 分析難度：高
• 收集難度：高
• 分析類型：行為（用戶做了什么？）
• 使用情境：基于任務(wù)

眼球追蹤研究需要特殊設(shè)備來追蹤用戶的眼睛注意力軌跡，因為他們在界面間移動。當許多參與者（30個或更多）在同一個界面上執(zhí)行相同的任務(wù)時，有意義的趨勢就會出現(xiàn)，你可以清楚地看出頁面的哪些元素會吸引用戶的注意力。

眼動跟蹤可以幫助你確定哪些界面和內(nèi)容元素需要強調(diào)或者弱化，從而使用戶能夠輕松的實現(xiàn)他們的目標。

眼球追蹤軟件可以使用聚合的凝視數(shù)據(jù)（用戶在這里查看界面，用綠點表示）來創(chuàng)建各種可視化效果。

進行眼球追蹤研究的一個主要障礙是高度專業(yè)化、價格昂貴和不穩(wěn)定的設(shè)備，這些設(shè)備需要大量的培訓(xùn)才能使用。

二、選擇一種方法（九種方法概況表）

上表提供了上面討論的研究方法的概況。

三、從你的研究問題開始

1.當你要確定使用哪種定量研究的方法時：

首先，你得先確定你要研究的問題：你想知道什么？以上方法中有一些非常適合一般性的研究問題。例如：

1. 我們產(chǎn)品的可用性是如何隨著時間變化的?
2. 和競爭對手相比，我們做得怎么樣?
3. 我們的哪些問題對于產(chǎn)品的影響最大？我們該如何確定其優(yōu)先級?

對于這些類型的問題，你可能需要使用：定量的可用性測試、web分析或調(diào)查問卷。

2.當你有一個想要回答的具體問題時：

以上方法中也會有好的方法來研究以下這些問題。例如：

1. 我們應(yīng)該如何調(diào)整我們的全球?qū)Ш椒诸悾?/li>
2. 我們的大多數(shù)用戶怎么看待我們的視覺設(shè)計？
3. 在dashboard中，我們應(yīng)該使用這兩種設(shè)計方案中的哪一種呢？

對于這些研究問題，你可能需要使用：A/B測試，卡片分類，樹狀測試，編碼定性評論法，滿意度調(diào)研，或眼球追蹤。

然而，在這些建議的方法中有一些不可控的因素。例如，由于安全或者技術(shù)原因，你的公司可能不會選擇A/B測試的方法。如果是這樣的話，你能做的就是發(fā)起一個面對面的可用性研究來對比兩個原型。

然而，這并不是定量可用性測試的典型應(yīng)用，所以我在這里就不討論它了。

四、考慮研究成本

在研究問題之后，選擇研究方法的第二大影響因素是成本。這些方法在成本上的差異很大程度上取決于你如何實現(xiàn)該研究。你使用的工具，要求的參與者數(shù)量，以及研究人員花費的時間都將影響最終的成本。

更復(fù)雜的是，許多團隊的研究預(yù)算也有很大差異。再者，這里的成本估計是相對的。

預(yù)算相對較低的團隊可能需要依靠數(shù)據(jù)收集分析的方法，比如，使用遠程可用性測試、在線卡片排序平臺（如OptimalSort）、A/B測試以及網(wǎng)站分析（或APP分析）的方法。根據(jù)經(jīng)驗，面對面的方法（比如面對面的可用性測試，面對面的卡片排序）往往成本比較高，因為它們需要很多的研究人員和時間成本。此外，他們還要求外出和租賃專業(yè)設(shè)備。

眼動測試應(yīng)該是這里列出的最昂貴的方法了，只有那些擁有大量預(yù)算和專門的用研團隊才會使用它。

這張圖顯示了本文中討論的定量研究方法的位置，即它們適合于研究問題（一般到特定）的不同維度級別。

五、總結(jié)

一旦你選擇了一個方法，就要去了解和學習！結(jié)束之后，確保你能夠按照你想要的方式和計劃進行研究，并保證能得到對自身有用的結(jié)果。

要注意的是：你不能只收集數(shù)據(jù)指標，不做任何統(tǒng)計分析就開始做決定。僅僅收集5個用戶的評級響應(yīng)是不夠的，要取一個平均值，然后再繼續(xù)。

對于這里討論的每種方法，都有不同的建議最小樣本量。為了獲得可靠的數(shù)據(jù)和確定統(tǒng)計的意義，你可能需要收集數(shù)據(jù)點的數(shù)量需要達到最小樣本量才行。如果不這樣做，就不能保證你的發(fā)現(xiàn)或者結(jié)論是正確的。

不管你使用哪種方法，一定要把握好需要你研究相關(guān)統(tǒng)計學概念的時間，以及獲取正確的最小樣本量的成本。你要相信，這并不像表面看起來那么困難，而你最終獲取的定量數(shù)據(jù)一定是有價值的。

原文作者：Kate Meyer

原文鏈接：https://www.nngroup.com/articles/quantitative-user-research-methods/

譯文校對：不器

#專欄作家#

熊貓小生，微信公眾號：MUXDesign，人人都是產(chǎn)品經(jīng)理專欄作家。高級交互設(shè)計師，UED負責人。關(guān)注互聯(lián)網(wǎng)C端產(chǎn)品設(shè)計相關(guān)，擅長移動端產(chǎn)品交互設(shè)計，前沿設(shè)計風格探索，設(shè)計流程優(yōu)化和管理，歡迎交流~

本文翻譯發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可，禁止轉(zhuǎn)載。

題圖由譯者提供