真實(shí)案例|AM 可用性測(cè)試案例總結(jié)
本文內(nèi)容來自作者的一次真實(shí)案例分享。因部分內(nèi)容不適宜公開做了簡(jiǎn)化,希望能給在可用性測(cè)試這個(gè)環(huán)節(jié)有困難的產(chǎn)品帶來些許幫助。
測(cè)試背景:14年參與的一次項(xiàng)目高保真測(cè)試經(jīng)驗(yàn)總結(jié)。當(dāng)時(shí)對(duì)am系統(tǒng)做了一次比較大的交互優(yōu)化,希望通過這次接近生產(chǎn)環(huán)境的測(cè)試,來驗(yàn)證優(yōu)化的效果是否理想。
整個(gè)測(cè)試過程共分3個(gè)步驟:
- 前期準(zhǔn)備工作
- 進(jìn)入測(cè)試環(huán)節(jié)
- 測(cè)試數(shù)據(jù)報(bào)告和交互優(yōu)化方案
一、前期準(zhǔn)備工作:
1.1 確定測(cè)試目標(biāo)
目標(biāo):
- 驗(yàn)證優(yōu)化后的系統(tǒng),用戶完成主要任務(wù)是否高效。
- 某些細(xì)節(jié)上的交互改動(dòng)比較有爭(zhēng)議,希望通過測(cè)試驗(yàn)證此類改動(dòng)是否合理。
1.2 準(zhǔn)備各類測(cè)試案例和測(cè)試問卷
(如圖一、圖二)
測(cè)試案例:
當(dāng)時(shí)是圍繞系統(tǒng)整體優(yōu)化方案驗(yàn)證這個(gè)目標(biāo)的。所以選擇的案例,是整個(gè)系統(tǒng)中最主要的3個(gè)高頻任務(wù)。
案例的編寫如下:
- 編寫一個(gè)真實(shí)的任務(wù)場(chǎng)景。目的:真實(shí)場(chǎng)景能得出更客觀的測(cè)試結(jié)果。
- 針對(duì)這個(gè)任務(wù)思考測(cè)試的關(guān)注點(diǎn),這些關(guān)注點(diǎn)都跟交互方案緊密相連。目的:在測(cè)試中,能及時(shí)發(fā)現(xiàn)方案的可行性。
- 操作。需要包含2個(gè)部分,模擬操作和可能出現(xiàn)的操作。模擬操作就是設(shè)計(jì)師為用戶設(shè)定的理想操作,可能出現(xiàn)的操作就是用戶真實(shí)場(chǎng)景下出現(xiàn)的其他操作。目的:在最后測(cè)試的時(shí)候能夠發(fā)現(xiàn)用戶實(shí)際的操作路徑與設(shè)計(jì)師設(shè)定的路徑差異有多大,差異點(diǎn)具體在哪里。
- 測(cè)試的用戶、環(huán)境、需要準(zhǔn)備的測(cè)試細(xì)節(jié)。
案例如圖一:
圖一
測(cè)試問卷:
當(dāng)時(shí)設(shè)定分為了幾類:
a. 用戶基本信息問卷+系統(tǒng)整體滿意度問卷
基本信息(用戶的年齡、工作經(jīng)驗(yàn)等)
滿意度(系統(tǒng)的友好性、美觀性等)
b. 針對(duì)可用性測(cè)試(任務(wù))的測(cè)試問卷
用戶對(duì)任務(wù)交互的整體評(píng)分 (如圖二)
圖二
c. 測(cè)試后的訪談表
每個(gè)任務(wù)完成后,記錄員和用戶進(jìn)行一對(duì)一的訪談,將用戶的主觀感受和意見記錄下來
d. 觀察員記錄表
結(jié)合圖一的思考維度,觀察員將用戶在測(cè)試時(shí)的用戶行為過程,記錄在記錄表中,便于后續(xù)總結(jié)。
1.3 自測(cè)并優(yōu)化問卷和案例
目的,及時(shí)在測(cè)試前發(fā)現(xiàn)問題并修正。
1.4 安排觀察員并準(zhǔn)備測(cè)試工具
錄屏軟件,眼動(dòng)儀等。
1.5 預(yù)約測(cè)試場(chǎng)地。
場(chǎng)地要根據(jù)實(shí)際情況來。需要保證足夠的安靜和放松。
1.6 根據(jù)測(cè)試案例,預(yù)約特定的測(cè)試用戶
當(dāng)時(shí)共測(cè)試11人,一個(gè)會(huì)議室同時(shí)測(cè)試3-4個(gè)用戶,測(cè)試3批,但是出現(xiàn)了測(cè)試信息被互相影響的問題。最佳的情況是測(cè)試用戶被隔離開單獨(dú)測(cè)試。
1.7 測(cè)試當(dāng)天準(zhǔn)備
測(cè)試當(dāng)天,觀察員和主持人提前到場(chǎng)地,準(zhǔn)備好相關(guān)測(cè)試材料(問卷、錄屏軟件等)和小禮品。通常需要保證測(cè)試環(huán)境是準(zhǔn)確無誤的,不然會(huì)影響測(cè)試的流程性。
1.8 待測(cè)試用戶均到場(chǎng)后,開始進(jìn)行測(cè)試。
二、進(jìn)入測(cè)試環(huán)節(jié)
2.1 主持人開場(chǎng)白
自我介紹、測(cè)試目的、信息保護(hù)告知等。
2.2 開始測(cè)試
用戶了解后,開始進(jìn)行測(cè)試,完成相關(guān)的測(cè)試任務(wù)。
2.3 測(cè)試過程
用戶在測(cè)試過程中,觀察員需要記錄用戶的行為。
用戶在困難時(shí),可以向觀察員求助。在測(cè)試過程中,主持人需要把控測(cè)試時(shí)間。
該環(huán)節(jié)記錄員就會(huì)進(jìn)行實(shí)時(shí)的錄入記錄表信息,如果觀察員提示2次用戶還是無法完成任務(wù),我們就設(shè)定該任務(wù)完成失敗。
2.4 填寫問卷
用戶完成測(cè)試后。進(jìn)行問卷的填寫,并回答觀察員的一些問題。觀察員與用戶是一對(duì)一的。
當(dāng)時(shí)設(shè)定了3個(gè)測(cè)試任務(wù),所以基本是完成1個(gè)任務(wù),用戶就填寫一下可用性測(cè)試問卷。填完后,繼續(xù)進(jìn)行下一個(gè)測(cè)試任務(wù)。中間填寫的時(shí)間都是一開始規(guī)定好的,過程太長(zhǎng)都會(huì)影響整個(gè)測(cè)試的流暢性。
整體滿意度問卷是在所有測(cè)試完成后,讓用戶填寫的。
2.5 結(jié)束測(cè)試
用戶完成測(cè)試和問卷后,主持人發(fā)放小禮品。
3.?測(cè)試數(shù)據(jù)分析報(bào)告和后續(xù)的優(yōu)化解決方案
3.1 測(cè)試完后,用研人員收集之前的問卷數(shù)據(jù)、錄屏軟件信息、埋點(diǎn)數(shù)據(jù)等。
當(dāng)時(shí)我們主要參考了問卷的數(shù)據(jù),錄屏是主要做補(bǔ)充遺漏點(diǎn)準(zhǔn)備的。比如用戶的信息輸入不明確或是打分特別低時(shí),可以參考錄屏的回放內(nèi)容來驗(yàn)證。埋點(diǎn)數(shù)據(jù)這塊當(dāng)時(shí)做的是純數(shù)據(jù)收集,沒有做一個(gè)合理的維度劃分,所以最后分析報(bào)告中沒有使用到。
3.2 根據(jù)相關(guān)的數(shù)據(jù),提煉出最終的數(shù)據(jù)分析報(bào)告(如圖3)
分析報(bào)告的分析方法是采用純?nèi)斯さ?。?dāng)時(shí)是2個(gè)人花了2周時(shí)間完成的ppt報(bào)告。
報(bào)告分為幾個(gè)部分:任務(wù)測(cè)試分析報(bào)告和系統(tǒng)整體報(bào)告。
任務(wù)測(cè)試報(bào)告分幾個(gè)維度:
a. 每個(gè)用戶對(duì)于任務(wù)的評(píng)分和優(yōu)化建議
b. 任務(wù)總結(jié)(評(píng)分總結(jié),包括單個(gè)任務(wù)的評(píng)分,整體任務(wù)的評(píng)分;建議總結(jié),需要優(yōu)化的信息)- 部分內(nèi)容如圖3
圖3
3.3 通過測(cè)試報(bào)告,最后找出產(chǎn)品存在的問題及相關(guān)的解決方案(如圖4)
分為幾個(gè)維度:任務(wù)名稱、遇到的問題、ppt具體截圖、問題的重要度、修改建議。最后輸出解決方案報(bào)告
圖4
最后,根據(jù)優(yōu)化方案評(píng)估實(shí)現(xiàn)難易度,進(jìn)行后續(xù)的用戶體驗(yàn)優(yōu)化
作者:章貞,微信號(hào):baobeiguagua,亞信交互設(shè)計(jì)師
本文由 @章貞 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理?,未經(jīng)許可,禁止轉(zhuǎn)載。
good