【出海用戶研究】看看國(guó)外流行的無(wú)主持可用性測(cè)試怎么做?
本文由 Nikki Anderson 發(fā)布于 Dovetail。Nikki 是一名用戶研究領(lǐng)導(dǎo)和教練,擁有超過(guò)八年的經(jīng)驗(yàn)。Dovetail 是用戶洞察研究數(shù)據(jù)存儲(chǔ)和分析平臺(tái),幫助用戶研究員和團(tuán)隊(duì)更好的產(chǎn)出洞察。
無(wú)主持可用性測(cè)試(Unmoderated Usability Testing)這種調(diào)研方式有不少爭(zhēng)議。如果設(shè)計(jì)的不好,非常容易出錯(cuò)。但是在特定情況下,它能成為項(xiàng)目的救命稻草。
大家可能對(duì)無(wú)主持可用性測(cè)試抱有懷疑:發(fā)布沒(méi)多久你就會(huì)得到一堆低質(zhì)量用戶反饋,讓團(tuán)隊(duì)頭疼于如何過(guò)濾、分析這堆混亂的數(shù)據(jù)。
現(xiàn)實(shí)是在用戶研究員的日常工作中,項(xiàng)目的時(shí)間線很緊,團(tuán)隊(duì)需要簡(jiǎn)化用戶研究方法,加快速度得到結(jié)果。當(dāng)時(shí)團(tuán)隊(duì)有好幾個(gè)研究需要完成,得同時(shí)進(jìn)行。我們嘗試了無(wú)主持可用性測(cè)試后,發(fā)現(xiàn)它并非之前想的那么糟。畢竟,用戶研究員不是唯一一個(gè)事情太多時(shí)間不夠的人。
有很多設(shè)計(jì)師和產(chǎn)品經(jīng)理嘗試進(jìn)行全面的用戶研究,但沒(méi)有這個(gè)時(shí)間和條件。無(wú)主持可用性測(cè)試能讓團(tuán)推快速拿到結(jié)果,同時(shí)仍然能從用戶那里收集有用的數(shù)據(jù)。
什么是無(wú)主持可用性測(cè)試?
當(dāng)團(tuán)隊(duì)有一個(gè)需要調(diào)研的問(wèn)題,用戶研究人員把這個(gè)問(wèn)題設(shè)計(jì)成一個(gè)帶有問(wèn)題的任務(wù)發(fā)布給參與者,讓他們自行錄制來(lái)回答問(wèn)題或完成指定任務(wù)。很多用研對(duì)無(wú)主持測(cè)試不感冒,是因?yàn)闇y(cè)試期間沒(méi)有主持人。那么無(wú)主持測(cè)試就對(duì)受訪者的要求很高。
用研必須招募到能夠把想法口述出來(lái) (Think out loud) 的參與者,理解任務(wù),理解如何使用設(shè)計(jì)原型,對(duì)問(wèn)題做出反饋,最后完成錄像。
無(wú)主持測(cè)試如果設(shè)計(jì)完善,能給項(xiàng)目帶來(lái)很多益處:
- 在短時(shí)間內(nèi)獲得大量反饋:從周五發(fā)出的調(diào)研,周一就可以獲得理想的數(shù)量。測(cè)試主要在周末進(jìn)行,幾乎不需要投入主持的精力
- 更低的調(diào)研成本:因?yàn)榉侵鞒譁y(cè)試需要的人力和參與度更少,10-20 分鐘就可以完成一份調(diào)研,通常比主持測(cè)試短得多
- 多樣化的參與樣本:遠(yuǎn)程線上進(jìn)行,更多人可以參與
- 簡(jiǎn)化研究過(guò)程:更快獲得結(jié)果,縮短調(diào)研時(shí)間線
非主持測(cè)試也有一些缺點(diǎn):
- 團(tuán)隊(duì)無(wú)法給參與者提醒、解釋任務(wù)、或詢問(wèn)他們?yōu)槭裁醋鞒瞿硞€(gè)行為,因?yàn)闆](méi)有主持人實(shí)時(shí)提問(wèn)
- 參加測(cè)試門檻很低,團(tuán)隊(duì)可能會(huì)遇到什么反饋都不分享 (think out loud)、只完成任務(wù)為了獲得“報(bào)酬”的人。這就導(dǎo)致無(wú)用數(shù)據(jù),如果參與者沒(méi)有分享他們的想法,團(tuán)隊(duì)就只會(huì)得到?jīng)]有解釋的行為數(shù)據(jù)
- 技術(shù)問(wèn)題得不到解決,比如參與者未正確錄制,數(shù)據(jù)就浪費(fèi)了
- 如果參與者混淆或誤解任務(wù),調(diào)研員無(wú)法回溯或解釋,就會(huì)導(dǎo)致不準(zhǔn)確的結(jié)果
無(wú)主持測(cè)試最大的風(fēng)險(xiǎn)是得到無(wú)用或混亂的數(shù)據(jù)。但如果我們仔細(xì)篩選用戶,在合適的項(xiàng)目節(jié)點(diǎn)選擇使用無(wú)主持測(cè)試,我們還是可以減少風(fēng)險(xiǎn)獲得我們想要的結(jié)果。
什么樣的項(xiàng)目適合無(wú)主持測(cè)試?
- 設(shè)計(jì)原型相對(duì)簡(jiǎn)單、直接,最好有明確的用戶路徑來(lái)完成一個(gè)任務(wù)
- 收集小的設(shè)計(jì)組件或設(shè)計(jì)更改的前后對(duì)比(類似 A/B 測(cè)試)
- 收集初步反應(yīng),例如人們看到一種設(shè)計(jì)會(huì)做出什么樣的第一反應(yīng)
- 推斷影響一個(gè)小樣本的問(wèn)題如何反映到更大的樣本
- 獲得用戶對(duì)品牌設(shè)計(jì)風(fēng)格,價(jià)值和調(diào)性的反饋
以下情況我們還是需要主持人,而不是簡(jiǎn)單粗暴的用無(wú)主持測(cè)試替代:
- 對(duì)一個(gè)設(shè)計(jì)或話題要求有深入反饋或理解,因?yàn)闊o(wú)主持測(cè)試的任務(wù)或問(wèn)題需要很簡(jiǎn)單,測(cè)試期間無(wú)法進(jìn)行后續(xù)跟進(jìn)
- 產(chǎn)品或原型較復(fù)雜,有許多不同的路徑,可能會(huì)讓用戶感到困惑或需要很長(zhǎng)時(shí)間來(lái)完成
- 測(cè)試一個(gè)非常早期的想法,比如原型有局限性,有些部分還不能點(diǎn)擊
- 參與者是自己主導(dǎo)整個(gè)流程,沒(méi)有有主持人就很難在合適的場(chǎng)景主動(dòng)表達(dá)他們的感受
無(wú)主持用戶測(cè)試的最常見(jiàn)目標(biāo)需要很集中,且流程需要短:
- 找出簡(jiǎn)單原型的可用性問(wèn)題
- 產(chǎn)品問(wèn)題的可能導(dǎo)致的更大影響
- 了解用戶是否可以找到信息或完成某個(gè)操作
- 衡量參與者是否理解產(chǎn)品的重點(diǎn)和價(jià)值
如何創(chuàng)建一個(gè)無(wú)主持測(cè)試
- 撰寫非主持任務(wù)和問(wèn)題是最有挑戰(zhàn)的部分,也是測(cè)試成功的關(guān)鍵。如果發(fā)送的任務(wù)或問(wèn)題撰寫不當(dāng),參與者的回答可能會(huì)帶有偏見(jiàn)或引起混淆
- 直接告訴參與者需要他們完成什么,或不希望他們做什么
- 設(shè)計(jì)合理的調(diào)研問(wèn)題或任務(wù)需要給參與者背景和上下文,為什么他們需要這個(gè)產(chǎn)品,在日常生活的什么場(chǎng)景中會(huì)使用它
- 如果用戶需要在調(diào)研中輸入日期、地點(diǎn)或特定數(shù)據(jù),也需要明確的提示他們
- 當(dāng)要求參與者完成任務(wù)時(shí),確保他們有一個(gè)明確的“結(jié)束”,讓參與者明確任務(wù)是否成功完成并且反饋給團(tuán)隊(duì)
- 避免使用帶有偏見(jiàn)或引導(dǎo)性的語(yǔ)言,尤其是界面上顯示的文字。例如,如果希望參與者點(diǎn)擊“注冊(cè)”按鈕,就要避免在任務(wù)里誤寫“登記”按鈕
- 將較艱巨的任務(wù)分解成幾個(gè)不同的步驟
- 反復(fù)提示參與者在錄制整個(gè)過(guò)程中說(shuō)出自己的思考過(guò)程
我們可以來(lái)看一些案例,如何設(shè)計(jì)無(wú)主持測(cè)試,以及要避免什么
例一:Brand Jeans(虛構(gòu)的服裝公司,b2c)
用戶目標(biāo):瀏覽并購(gòu)買一條平均價(jià)格為50美元左右的牛仔褲
不完善的測(cè)試任務(wù):找到你尺寸的黑色牛仔褲
完善的測(cè)試任務(wù):你正在尋找一條新的 Brand 牌牛仔褲。請(qǐng)前往 brandjeans.com,去購(gòu)買一條牛仔褲,你的預(yù)算是 50美元左右。
小貼士:如果給用戶一定的自由,讓他們?nèi)ケ容^不同類型的牛仔褲,并提供一個(gè)參考預(yù)算(50美元),他們可以更自然的完成任務(wù)給出日常瀏覽網(wǎng)站的路徑
例二:Stay Here(虛構(gòu)的酒店 ,b2b)
用戶目標(biāo):將酒店場(chǎng)地和房間的照片上傳到 Stay Here 平臺(tái)
不完善的測(cè)試任務(wù):您想將酒店照片上傳到網(wǎng)站。登錄平臺(tái),點(diǎn)擊上傳照片按鈕,上傳三張照片,點(diǎn)擊提交按鈕,告訴我們你是否能完成任務(wù)。
完善的測(cè)試任務(wù):你想在你的StayHere頁(yè)面上添加一張新套房的照片。請(qǐng)點(diǎn)擊平臺(tái)鏈接并將提供的照片上傳。提示:您需要準(zhǔn)備幾張照片。
第一個(gè)任務(wù)過(guò)于具體,并給出了太多線索。更好的測(cè)試設(shè)計(jì)應(yīng)該給出合理量的信息,同時(shí)告訴用戶他們需要做什么,包括要準(zhǔn)備什么:例如提供幾張供他們上傳的照片。
綜上,我們?cè)谠O(shè)計(jì)任務(wù)時(shí)需要考慮:
- 任務(wù)背后的上下文
- 平衡任務(wù)指令的具體與寬泛程度
- 在合適的節(jié)點(diǎn)為參與者提供有用的信息來(lái)完成任務(wù)
- 以行動(dòng)為導(dǎo)向的任務(wù)設(shè)計(jì),結(jié)論需要能夠讓團(tuán)隊(duì)有明確的行動(dòng)目標(biāo)
- 記得在發(fā)布測(cè)試前進(jìn)行一兩次模擬測(cè)試,來(lái)排除潛在流程問(wèn)題
如果研究不需要過(guò)多解釋復(fù)雜的流程或細(xì)節(jié),參與者也不會(huì)對(duì)任務(wù)產(chǎn)生太大的困惑,那就非常適合做無(wú)主持測(cè)試,來(lái)迅速獲得用戶的反饋和產(chǎn)品的改進(jìn)方向。
本文由人人都是產(chǎn)品經(jīng)理作者【黃蘇晨】,微信公眾號(hào):【Peron用戶研究】,黃蘇晨 發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載。
題圖來(lái)自Unsplash,基于 CC0 協(xié)議。
- 目前還沒(méi)評(píng)論,等你發(fā)揮!