想要做好用戶調研,你要學會這九種定量用戶研究的方法

當你需要關于自己產品的用戶體驗數據時,然而,你卻不知道從哪里獲取?那么首先,你需要選擇正確的研究方法。接下來,我們來看看這些當下最流行的定量研究方法。

許多用戶體驗專家傾向于采用定性的研究方法,原因在于他們認為:定性的研究方法要比定量的研究方法更容易操作和節約成本。其實,他們忽略了與定量分析聯系緊密的大樣本量以及數據統計的巨大前景。

如果你也是這樣認為的,那你也就錯了!定量的研究方法是任何有經驗的 UX 研究人員必須掌握的重要技能。定量用戶研究的方法允許你做以下事情:

用一個數值來表示你產品的可用性。數值有時比質量檢測的結果和視頻更有說服力(特別是當你試圖說服像高管這樣的人)時。

比較不同的設計(比如,你的產品的新舊版本,或者是你的產品與競爭對手的產品相比),并且確定你觀察到的差異是否具有統計學意義,而不是隨機的。

改進用戶體驗權衡決策。比如,如果預期的設計改進成本很高,那么它值得做嗎?如果你已經想到這種改變會提高可用性,那么定量研究方法可以幫助你驗證重新設計是否值得。

將用戶體驗的改進與企業目標以及關鍵績效指標結合起來(從而證明你的投資回報并且證明你的用戶體驗團隊存在的價值)。

這篇文章可以讓你清楚的知道,用戶研究的第一步是:確定要使用哪種定量的研究方法。接下來,我們將會給大家介紹一些當下最流行的定量研究方法:

  • 定量可用性測試(基本測試)
  • 網站分析(或 APP 分析)
  • A/B 測試或者多變量測試
  • 卡片分類法
  • 樹狀測試
  • 調研或者問卷調查
  • 聚類定性評價
  • 滿意度調研
  • 眼動測試

以上每種方法都會產生有價值的定量數據,但是這些方法在收集的數據類型以及所需的資源和工作量方面差別很大。

一、九種定量用戶研究方法概述

本文列出了這些方法最常見的示例,并對每種方法的成本和難度進行了評估。與其它任何研究方法一樣,這些方法中的每一種都可以適用各種不同的需求。

根據具體情況,你的成本和困難可能與我們的粗略估計有所不同。此外,你應該意識到,這些方法中的每一種都需要不同的最小樣本量來確定統計的意義。

1. 定量可用性測試(基本測試)
  • 用途:隨著時間的推移跟蹤可用性;與競爭對手比較。
  • 成本:中等
  • 收集難度:中等
  • 分析難度:中等
  • 方法類型:行為(用戶做了什么?)
  • 使用的情境:基于任務

盡管不常用,但是,定量可用性測試(有時也稱為可用性基準測試)與定性可用性測試其實非常相似:兩種方法都要求用戶使用產品去執行實際的任務。兩者的主要區別在于:定性可用性測試優先考慮如何觀察用戶行為,比如,識別可用性問題。相比之下,定量可用性測試的重點則是收集數據指標,比如任務時間或者成功率。

一旦你收集了相對較大的樣本量(大約35個或者更多),你就可以使用它們來跟蹤產品的可用性,或者將其與競爭對手產品的可用性進行比較。

想要做好用戶調研,你要學會這九種定量用戶研究的方法

如果在產品的迭代過程中,你一直追蹤著一些產品的可用性指標,那么你就可以創建一張類似這樣的趨勢圖。這種類型的信息可以幫助你持續關注產品的用戶體驗,并確保它隨著時間的推移而逐步改進。

你所選擇的可用性測試的類型(現場測試、遠程引導測試或遠程無引導測試)將對成本產生影響,并且難以與此方法相關聯。由于定量和定性可用性研究的目標不同,測試的結構和進行的任務也需要有所不同。

2. 網站分析(或者APP分析)
  • 用途:發現問題或確定問題的輕重緩急;監測性能。
  • 成本:低
  • 收集難度:低
  • 分析難度:高
  • 方法類型:行為(用戶做了什么?)
  • 使用情境:現場

分析數據,描述了用戶使用線上產品的各種操作行為,比如,他們去了哪里,點擊了什么,使用了什么功能,他們從哪里來以及到哪里去。這些信息可以幫助你做各種各樣的用戶體驗活動。特別是,它可以幫助你監測各種內容、UI或產品功能,并識別哪些不能正常運行。

3. A/B測試或者多變量測試:
  • 用途:對比兩種設計方案
  • 成本:低
  • 收集難度:低
  • 分析難度:低
  • 方法類型:行為(用戶做了什么?)
  • 使用情境:現場

雖然,你可以使用分析指標來監控產品的性能(如上所述),但你也可以創建一些實驗,來檢測不同的UI設計,然后,通過A/B測試或多變量測試來改變這些指標。

在A/B測試中,團隊需要創建同一界面的兩個不同的最新版本,然后將每個版本展示給不同的用戶,用來確定哪個版本的性能更好。

例如,你可以創建同一個操作按鈕標簽的兩個版本:「獲得定價」或「學習更多」。然后,你就可以跟蹤統計兩個版本中按鈕的點擊次數。多變量測試的操作方式也是類似的,但是,它與A/B測試不同的是:多變量測試需要同時測試多個不同的設計元素(例如,測試可能涉及不同的按鈕標簽、排版和頁面上的位置)。

這兩個基于分析的實驗,對于決定同一個設計的不同變體非常有用,并且可以結束團隊關于哪個版本最好的爭論。

想要做好用戶調研,你要學會這九種定量用戶研究的方法

A/B測試是將網站流量(用戶)拆分為兩部分:一部分導入到A方案,另一部分則導入到B方案。

這種方法的一個主要缺點是:它經常會被濫用。有些團隊沒有盡可能長時間地運行測試,收集不到足夠的樣本,就匆忙的下了結論,這樣的結論往往失敗的風險很大。

4. 卡片分類法:
  • 用途:確定信息架構的標簽和結構
  • 成本:低
  • 收集難度:低
  • 分析難度:中
  • 方法類型:態度(用戶說了什么?)
  • 使用情境:不使用產品

在卡片分類研究中,參與者會拿到一些內容項(有時是寫在索引卡上的),并要求以一種對他們有意義的方式對這些項目進行分組和標注。這個測試既可以親自進行,也可以使用物理卡片或者使用類似于OptimalSort這樣的卡片排序平臺進行遠程測試。

想要做好用戶調研,你要學會這九種定量用戶研究的方法

當卡片排序測試是親自進行時,用戶對物理卡片進行排序和分類,每張卡片都包含了它所代表的內容的描述。

這個方法可以讓你有機會了解用戶的心理模型。他們使用什么術語?他們是如何將這些概念組合在一起的?

對創建類似分組的參與者的百分比進行定量分析,可以幫助確定哪種分類方法對大多數用戶來說是可以理解的。

5. 樹狀測試
  • 用途:評估信息架構的層次結構
  • 成本:低
  • 收集難度:低
  • 分析難度:中
  • 方法類型:行為(用戶做了什么?)
  • 使用情境:基于任務而不是使用產品

在樹狀測試中,會讓參與者嘗試使用網站的分類結構來完成任務。這種方法本質上是一種評估界面信息架構的方法,通過這種方法可以將界面上的其它信息區分開來。

例如,假設你的產品是一個寵物用品網站,而這是它頂層的層次結構。

想要做好用戶調研,你要學會這九種定量用戶研究的方法

網站信息層次結構的顯示可能看起來是這樣的,樹狀測試要求參與者在這樣的層次結構中找到一個特定的條目(例如,項圈),他們首先看到的只是頂層的分類(例如,狗狗、貓咪、小鳥等)。一旦他們做出一個選擇(例如,狗狗),就會看到自己選擇相應選項的子類別。

你可以要求你的參與者在一個任務中找到狗項圈。對樹狀測試結果的定量分析將顯示人們是否能夠在信息層次結構中找到該項的正確路徑,以及可以確定有多少參與者選擇了錯誤的類別。

這種方法有助于確定界面信息架構的結構、文案以及放置的位置是否符合用戶的心理預期。

6.調研或者問卷調查
  • 用途:收集調研用戶的態度和行為信息
  • 成本:低
  • 收集難度:低
  • 分析難度:低
  • 方法類型:態度(用戶說了什么)
  • 使用情境:任何

問卷調查是一種靈活的用戶研究工具。你可以在不同的環境中進行測試,比如,在一個實時網站、電子郵件或可用性測試之后進行簡短的攔截調查。

調研時可以同時獲得定量和定性的數據,比如評分、多項選擇題中的答案的比例,再加上開放式問題的答案。你甚至可以把對調查的定性回答轉化為數字數據(參見下面的代碼質量評論部分)。

想要做好用戶調研,你要學會這九種定量用戶研究的方法

像這樣的語義差別等級量表,每個單選按鈕代表一個數值。被調研的用戶可以選擇:1.容易使用;5.難以使用;或選擇介于兩者之間的選項。對這個問題的平均回答來衡量你的應用程序在使用上的難易程度。

你可以創建自己的自定義問卷,也可以使用其它已經建好的問卷模版(例如,系統可用性量表或網絡推廣者評分)。

問卷的一個優點是:可以經常將你的調研結果與行業或競爭者的分數進行比較,看看你做得怎么樣。即使你創建了自己的自定義問卷,也可以隨時間的推移對自己產品平均分數進行追蹤,來監控產品的改進情況。

7. 聚類定性評價

  • 用途:確定定性數據中的重要主題
  • 成本:低
  • 分析難度:中
  • 收集難度:中
  • 分析類型:態度(用戶說了什么?)
  • 使用情境:任何

這種技術不是數據收集的方法,而是定性數據的分析方法,它包括根據共同主題對定性研究(例如日記研究、調查、焦點小組或訪談)的觀察結果進行分組。如果你進行了大量的觀察,你就可以計算出一個特定主題被提及的實際數量。

例如,假設你做了一個日記本研究,讓參與者在他們的日常生活中,每周都要報告他們使用產品的時間,目的是理解他們使用產品的背景,你可以算一下用戶在工作、家中或外出的時候使用產品的比例。

這種方法可以識別特定主題或情況的流行程度或頻率,例如,用戶抱怨的頻率或UI問題。

這種方法可以很好地從大量的定性信息中挖掘數值數據,但它可能耗時會非常長。

8. 滿意度調研
  • 用途:確定與你的產品或品牌相關的屬性
  • 成本:低
  • 分析難度:低
  • 收集難度:低
  • 分析類型:態度(用戶說了什么?)
  • 使用情境:基于任務

定量可用性測試試圖使用量化的方式來衡量產品的質量,比如:審美情趣、品牌實力、語氣等。這些研究可以根據你的研究問題進行定制,但這些方法通常會首先讓參與者接觸到產品(通過向他們展示靜態圖片或者要求他們使用現場產品或原型)。然后,要求用戶通過從描述性的詞語列表中選擇一個來描述當前設計。

如果你獲取自身目標用戶的樣本量足夠大,那么整體趨勢就會顯示出來。例如,你可能會有84%的受訪者將此設計描述為「最新」。

9. 眼動研究
  • 用途:確定哪些 UI 元素是分散注意力的、可發現的或可找到的
  • 成本:高
  • 分析難度:高
    收集難度:高
  • 分析類型:行為(用戶做了什么?)
  • 使用情境:基于任務

眼球追蹤研究需要特殊設備來追蹤用戶的眼睛注意力軌跡,因為他們在界面間移動。當許多參與者(30個或更多)在同一個界面上執行相同的任務時,有意義的趨勢就會出現,你可以清楚地看出頁面的哪些元素會吸引用戶的注意力。

眼動跟蹤可以幫助你確定哪些界面和內容元素需要強調或者弱化,從而使用戶能夠輕松的實現他們的目標。

想要做好用戶調研,你要學會這九種定量用戶研究的方法

眼球追蹤軟件可以使用聚合的凝視數據(用戶在這里查看界面,用綠點表示)來創建各種可視化效果。

進行眼球追蹤研究的一個主要障礙是高度專業化、價格昂貴和不穩定的設備,這些設備需要大量的培訓才能使用。

二、選擇一種方法(九種方法概況表)

想要做好用戶調研,你要學會這九種定量用戶研究的方法

上表提供了上面討論的研究方法的概況。

三、從你的研究問題開始

1. 當你要確定使用哪種定量研究的方法時

首先,你得先確定你要研究的問題:你想知道什么?以上方法中有一些非常適合一般性的研究問題。例如:

  • 我們產品的可用性是如何隨著時間變化的?
  • 和競爭對手相比,我們做得怎么樣?
  • 我們的哪些問題對于產品的影響最大?我們該如何確定其優先級?

對于這些類型的問題,你可能需要使用:定量的可用性測試、web分析或調查問卷。

2. 當你有一個想要回答的具體問題時

以上方法中也會有好的方法來研究以下這些問題。例如:

  • 我們應該如何調整我們的全球導航分類?
  • 我們的大多數用戶怎么看待我們的視覺設計?
  • 在 dashboard 中,我們應該使用這兩種設計方案中的哪一種呢?

對于這些研究問題,你可能需要使用:A/B 測試,卡片分類,樹狀測試,編碼定性評論法,滿意度調研,或眼球追蹤。

然而,在這些建議的方法中有一些不可控的因素。例如,由于安全或者技術原因,你的公司可能不會選擇A/B測試的方法。如果是這樣的話,你能做的就是發起一個面對面的可用性研究來對比兩個原型。

然而,這并不是定量可用性測試的典型應用,所以我在這里就不討論它了。

四、考慮研究成本

在研究問題之后,選擇研究方法的第二大影響因素是成本。這些方法在成本上的差異很大程度上取決于你如何實現該研究。你使用的工具,要求的參與者數量,以及研究人員花費的時間都將影響最終的成本。

更復雜的是,許多團隊的研究預算也有很大差異。再者,這里的成本估計是相對的。

預算相對較低的團隊可能需要依靠數據收集分析的方法,比如,使用遠程可用性測試、在線卡片排序平臺(如 OptimalSort)、A/B 測試以及網站分析(或 APP 分析)的方法。根據經驗,面對面的方法(比如面對面的可用性測試,面對面的卡片排序)往往成本比較高,因為它們需要很多的研究人員和時間成本。此外,他們還要求外出和租賃專業設備。

眼動測試應該是這里列出的最昂貴的方法了,只有那些擁有大量預算和專門的用研團隊才會使用它。

想要做好用戶調研,你要學會這九種定量用戶研究的方法

這張圖顯示了本文中討論的定量研究方法的位置,即它們適合于研究問題(一般到特定)的不同維度級別。

五、總結

一旦你選擇了一個方法,就要去了解和學習!結束之后,確保你能夠按照你想要的方式和計劃進行研究,并保證能得到對自身有用的結果。

要注意的是:你不能只收集數據指標,不做任何統計分析就開始做決定。僅僅收集5個用戶的評級響應是不夠的,要取一個平均值,然后再繼續。

對于這里討論的每種方法,都有不同的建議最小樣本量。為了獲得可靠的數據和確定統計的意義,你可能需要收集數據點的數量需要達到最小樣本量才行。如果不這樣做,就不能保證你的發現或者結論是正確的。

不管你使用哪種方法,一定要把握好需要你研究相關統計學概念的時間,以及獲取正確的最小樣本量的成本。你要相信,這并不像表面看起來那么困難,而你最終獲取的定量數據一定是有價值的。

原文鏈接:《Quantitative User-Research Methodologies: An Overview》??Kate Meyer

歡迎關注譯者微信公眾號:「熊貓設計院」

想要做好用戶調研,你要學會這九種定量用戶研究的方法

圖片素材作者:Alejandro Ramirez

「3篇好文帶你了解用戶研究」

================明星欄目推薦================

優優教程網 UiiiUiii.com 是優設旗下優質中文教程網站,分享了大量PS、AE、AI、C4D等中文教程,為零基礎設計愛好者也準備了貼心的知識樹專欄。開啟免費自學新篇章,按照我們的專欄一步步學習,一定可以迅速上手并制作出酷炫的視覺效果。

設計導航:國內人氣最高的設計網址導航,設計師必備: http://hao.uisdc.com

收藏 237
點贊 10

復制本文鏈接 文章為作者獨立觀點不代表優設網立場,未經允許不得轉載。