本篇主要討論兩個問題：

• 移動情境在移動可用性測試中的考慮
• 使用測試設(shè)備還是用戶設(shè)備

1 移動情境探討

在移動互聯(lián)網(wǎng)時代，我們可以在任何時間、任何地點使用移動設(shè)備，情境相對更為復(fù)雜。這里我們定義的移動情境，即用戶使用移動應(yīng)用和產(chǎn)品時的環(huán)境和狀態(tài)，廣義來講可以是任何影響用戶與移動設(shè)備、應(yīng)用進(jìn)行交互的事物。諸如導(dǎo)致用戶分心的內(nèi)容、多任務(wù)并行的場景、操作時的手勢、低電量的情況和網(wǎng)絡(luò)連接環(huán)境等都是典型問題。移動情境具有復(fù)雜性、多樣性、多變性等特征，因此研究員和相關(guān)學(xué)者也非常重視在移動可用性測試中對情境的考慮。Harrison et al.在建立新的移動可用性測試模型PACMAD時，就將情境因素引起的認(rèn)知負(fù)擔(dān)納入了其中。 那么移動情境包含哪些內(nèi)容呢？Nadav Savio創(chuàng)建了移動交互情境模型（如下圖）。該模型闡述了影響用戶在使用移動應(yīng)用時的情境變量，可簡單劃分為三類。

• 第一類可稱為環(huán)境情境，包括用戶所處的環(huán)境、文化規(guī)范及所正在進(jìn)行的活動；
• 第二類可稱為任務(wù)情境，即用戶的使用目標(biāo)、注意力水平及多任務(wù)狀態(tài)；
• 第三類可稱為設(shè)備情境，包括用戶所使用的移動設(shè)備本身（設(shè)備參數(shù)、用戶對設(shè)備的熟悉程度等）、網(wǎng)絡(luò)連接情況和運營商。所有這些包圍在用戶和設(shè)備之間的交叉空間，即移動界面。

第三類設(shè)備情境所涉及的“使用測試設(shè)備還是用戶設(shè)備”的問題，在后面我們將單獨討論。本節(jié)討論的移動情境指的是環(huán)境情境和任務(wù)情境。

1.1?評估移動情境對移動可用性測試的重要性

移動情境對于移動應(yīng)用設(shè)計很重要，但其重要程度也會因產(chǎn)品類型和研究目的的不同而不同。

• 根據(jù)產(chǎn)品使用環(huán)境評估移動情境的重要程度

首先需要考慮我們產(chǎn)品的目標(biāo)用戶通常是在怎樣的情境中使用產(chǎn)品的，據(jù)此再進(jìn)行有針對性的可用性測試。例如，對于網(wǎng)絡(luò)電話App來說，其目標(biāo)用戶主要是在Wifi環(huán)境下?lián)艽蚓W(wǎng)絡(luò)電話，通常是在家里或其他干擾相對較少的環(huán)境下使用，這時的情境相對穩(wěn)定。而對于滴滴打車（下圖）這樣的應(yīng)用，目標(biāo)用戶則會更多地在真正的移動情境中使用產(chǎn)品，會受到更多移動情境的影響。

• 根據(jù)可用性測試研究目的來考慮移動情境

考慮移動情境的程度還要結(jié)合可用性測試的研究目的。如果產(chǎn)品處在設(shè)計初期，需要關(guān)注產(chǎn)品整體層面的問題，如導(dǎo)航的合理性、頁面邏輯關(guān)系等，這個階段可能只有低保真原型可以用于測試，此時移動情境的重要度可以降低。

如果產(chǎn)品的設(shè)計已經(jīng)基本完善，開始進(jìn)行細(xì)節(jié)的修改迭代，且有可用的高保真原型或現(xiàn)成產(chǎn)品，此時需要提升移動情境的重要性。

實際工作中，由于時間和資源的限制，可能無法在一個產(chǎn)品設(shè)計周期內(nèi)進(jìn)行多次可用性測試，在一次可用性測試中可能需要包含多個研究目的，此時需要和團(tuán)隊溝通清楚測試的主要目的，結(jié)合設(shè)計階段和測試資源，權(quán)衡把握移動情境的重要程度。

1.2?將移動情境納入移動可用性測試方案中

確定了移動情境的重要性后，在設(shè)計移動可用性測試方案時如何考慮移動情境？

• 實驗室模擬

傳統(tǒng)的可用性測試大多數(shù)都是在實驗室模擬環(huán)境下進(jìn)行的。Razak et al.表示實驗室測試有諸多優(yōu)勢。

首先，實驗室測試可以控制研究條件和變量。

其次，所有的被試者都是在相同的受控環(huán)境下進(jìn)行測試，可以得到更高質(zhì)量的數(shù)據(jù)。

實驗室測試也允許研究人員聚焦于感興趣的現(xiàn)象和問題，更好地收集數(shù)據(jù)，比如對被試者的操作和屏幕的錄制。

但事實上，在實際操作中，實驗室內(nèi)很難模擬真實的用戶情境和周圍的環(huán)境。特別是對移動測試，實驗室內(nèi)缺少相應(yīng)的情境因素，即使有一定程度的模擬，被試者實際體驗起來也沒那么自然，而且耗時間、花費大。因而在實驗室環(huán)境下進(jìn)行的移動可用性測試常常被質(zhì)疑。但即使如此，據(jù)統(tǒng)計，71%的移動設(shè)備測試都還是在實驗室環(huán)境下進(jìn)行的。

• 真實環(huán)境

如果是在真實環(huán)境下進(jìn)行測試，就可以獲得更為自然的移動情境。PC互聯(lián)網(wǎng)產(chǎn)品的使用情境多是工作環(huán)境或家庭環(huán)境，研究人員進(jìn)入家庭或工作環(huán)境的門檻較高。相比而言，移動互聯(lián)網(wǎng)產(chǎn)品的使用情境可能是隨時隨地的，在真實的環(huán)境下做移動可用性測試的可能性也更高。但在真實環(huán)境下的測試也存在較多劣勢，首先是受控性相對較差，研究人員可能需要處理較多突發(fā)狀況；其次，研究人員挖掘問題的深度和觀察結(jié)果的細(xì)致性也遠(yuǎn)不如實驗室環(huán)境；另外，所有被試者的測試環(huán)境難以統(tǒng)一，結(jié)果的橫向比較可能也存在困難。

實驗室模擬和真實環(huán)境各有優(yōu)劣，在實際應(yīng)用中如何權(quán)衡？

• 根據(jù)之前評估的移動情境的重要性來設(shè)計測試方案

如果評估產(chǎn)品使用環(huán)境及研究目的后，發(fā)現(xiàn)移動情境非常重要，那么建議著重采用真實環(huán)境下的測試方案。

比如店內(nèi)導(dǎo)購應(yīng)用的測試，在商店內(nèi)進(jìn)行會幫我們發(fā)現(xiàn)更多更真實的問題。 如果評估后發(fā)現(xiàn)移動情境的重要性不高或較低，那么建議在模擬情境下進(jìn)行測試即可。使用相同的受控裝置，我們也可以得到更高質(zhì)量的數(shù)據(jù)。在此基礎(chǔ)上，可以視情況補(bǔ)充少量真實情境的測試，以發(fā)現(xiàn)在實驗室環(huán)境下較難發(fā)現(xiàn)的問題。

但一些特殊的用戶群可能更適合真實環(huán)境測試方案，Oh &Kim表示測試兒童移動產(chǎn)品、了解兒童的需求和問題，最好是進(jìn)行真實環(huán)境測試。

• 不要為了尋找或創(chuàng)造最佳的情境而阻礙可用性測試的進(jìn)行

在設(shè)計可用性測試方案時，哪怕時間和資源受到限制，也不要為了尋找或創(chuàng)造最佳的情境而阻礙移動可用性測試的進(jìn)行。

事實上，研究發(fā)現(xiàn)大多數(shù)的用戶其實是擅長想象，并能理解他們可能與移動設(shè)備會產(chǎn)生交互的情境的。設(shè)置人工情境時，可以不用嚴(yán)苛地模擬。比如為了使測試環(huán)境貼近家的感覺，我們可以直接在休息區(qū)的沙發(fā)上進(jìn)行測試和交流，雖然與用戶實際在家使用的環(huán)境有所不同，但相比到處都是設(shè)備的實驗室環(huán)境，測試結(jié)果可能更有效。

最后，哪怕條件非常簡陋，幾乎不能考慮情境因素，也不要放棄做可用性測試。因為哪怕只是坐下來和用戶溝通，看看他們?nèi)绾问褂卯a(chǎn)品，或者進(jìn)行簡單的遠(yuǎn)程測試，也會有很多收獲的。

1.3在真實環(huán)境下進(jìn)行移動可用性測試的經(jīng)驗

在真實環(huán)境下進(jìn)行移動可用性測試，可能會發(fā)現(xiàn)在設(shè)計產(chǎn)品時不會考慮到的，關(guān)于噪音、光線和社交狀況等情境問題，這些都可能對最終的產(chǎn)品設(shè)計產(chǎn)生比較大的影響。以下是在真實環(huán)境下進(jìn)行移動可用性測試的一些經(jīng)驗，供參考。

• 與場地方提前協(xié)調(diào)好

在一些特定的公共區(qū)域，如銀行、商場、超市等，在測試前，可能需要和場地方提前溝通協(xié)調(diào)好，確保是在場地方允許的情況下進(jìn)行。

• 選擇合適的招待物品

實踐發(fā)現(xiàn)，使用一些大家普遍喜歡的小禮物來吸引用戶幫忙測試是很好的辦法，比如玩具公仔等。另外，需要根據(jù)測試環(huán)境和需求選擇合適的吸引和招待用戶的東西，例如，在冬天進(jìn)行戶外測試時，送上一杯熱飲會是個不錯的選擇。

• 第一句話必須爭取到用戶

通常邀請用戶參與的第一句話可以是：“可以耽誤您10分鐘請你喝一杯茶嗎？”或者是“我們有一個很酷的產(chǎn)品，愿意來試一下嗎？”

• 快速詢問一兩個篩選問題

一旦有用戶感興趣參與進(jìn)來，接下來需要了解的是，這個用戶是否使用智能手機(jī)或者是否經(jīng)常使用智能手機(jī)，這時候也可以順手拍一下用戶的手機(jī)。然后針對測試目的詢問一兩個簡短的問題，例如，您使用在線銀行嗎？您通過在線預(yù)訂方式預(yù)訂機(jī)票嗎？即使用戶不符合你的目標(biāo)，也不要讓用戶空手離開，還是可以送小禮物表示感謝。

• 保持測試過程盡量簡短

理想情況下，測試過程最好是5-10分鐘。通常人們不會愿意長時間站在街上和你說話。因此，在真實環(huán)境下做移動可用性測試，一般只能讓用戶做一兩個任務(wù)。

• 兩個研究人員結(jié)伴做測試

在真實環(huán)境下，如果是一個研究人員，那么沒有辦法在做詳細(xì)記錄的同時，還可以注意觀察用戶的操作。因此，最好有一個主持人角色，一個記錄員角色，兩個研究人員結(jié)伴做測試。

• 不要假設(shè)用戶懂移動相關(guān)的術(shù)語，例如App Store或iCloud

有研究人員發(fā)現(xiàn)，相比PC互聯(lián)網(wǎng)時代，用戶對移動設(shè)備相關(guān)的術(shù)語、隱喻、交互了解更少。因此，在測試任務(wù)中應(yīng)盡量避免使用術(shù)語。

2?使用測試設(shè)備還是用戶設(shè)備

Schusteritsch et al在其研究中指出，在移動可用性測試中要讓用戶盡可能自然地手持設(shè)備，這對獲得用戶與設(shè)備準(zhǔn)確的交互方式至關(guān)重要。要完成這種自然的交互過程，測試設(shè)備的選擇是首要的考慮因素，究竟是使用測試設(shè)備還是用戶設(shè)備？

有研究者指出，要保證被試者能自然地完成任務(wù)，就應(yīng)該盡可能地讓其使用自己的設(shè)備。使用被試者自己的設(shè)備，一方面可以更真實地模擬使用情境，特別是測試中會涉及其他產(chǎn)品的情況下，例如，使用用戶個性化的輸入法、或是分享到其使用的社交產(chǎn)品中，都可以真實反映被試者如何與產(chǎn)品互動以及如何實現(xiàn)切換等；另一方面，相比統(tǒng)一的測試設(shè)備，使用被試者自己的設(shè)備測試，可以覆蓋不同的移動系統(tǒng)平臺、不同的屏幕大小和分辨率，可以提供測試設(shè)備的多樣性，保證了測試的生態(tài)效度。

在實際測試中，要確定使用測試設(shè)備還是用戶設(shè)備時，除了考慮模擬使用情境和保證測試生態(tài)效度外，我們建議還可以從以下幾方面去考慮。

• 測試目的

如果本次測試的目的是為了了解用戶是如何使用移動網(wǎng)站或移動App，使用測試設(shè)備可能是更好的選擇，讓你能夠更好地控制無關(guān)因素的干擾，專注于被試者與移動產(chǎn)品之間的交互行為；但如果本次測試的目的并不局限于行為層面的考察，例如，測試目的還想了解被試者是否能夠在他們習(xí)慣的產(chǎn)品下載渠道中正常下載目標(biāo)產(chǎn)品，產(chǎn)品在不同設(shè)備上的適配性和表現(xiàn)如何，那么使用用戶設(shè)備才是更好的選擇。

• 測試對象是產(chǎn)品還是原型

如果測試處于產(chǎn)品設(shè)計前期，希望通過可用性測試快速發(fā)現(xiàn)問題，并制作了產(chǎn)品原型進(jìn)行測試。因為時間限制和預(yù)裝系統(tǒng)環(huán)境限制等因素，測試原型可能難以預(yù)裝到每個用戶的設(shè)備中。這時使用預(yù)裝好的統(tǒng)一測試設(shè)備會是更好的選擇。（蘋果的Testflight是在App發(fā)布前測試的解決方案之一）

• 第三方工具限制

相較于PC可用性測試，移動可用性測試的錄屏和記錄更加困難。如果要錄制被試者操作任務(wù)的屏幕和過程，需要一些第三方的鏡像產(chǎn)品、錄屏產(chǎn)品等來配合使用（具體工具的使用，在第三篇中有詳細(xì)闡述）。這些第三方工具的使用，需要預(yù)裝和調(diào)試。因此，不便于使用用戶設(shè)備。另外，如果明確讓被試者知道有錄屏軟件在錄制自己的操作行為，測試數(shù)據(jù)的有效性可能會降低。

• 被試者的學(xué)習(xí)成本和使用習(xí)慣

移動設(shè)備因系統(tǒng)的多樣性和設(shè)置的個性化而存在一定的復(fù)雜性。面對一臺新的移動設(shè)備，用戶需要進(jìn)行一定程度的學(xué)習(xí)。有些被試者對新設(shè)備的學(xué)習(xí)成本會比較高，例如，被試者是老年人，他們通常需要很長時間才能學(xué)會使用自己的手機(jī)，因此讓這類被試者使用統(tǒng)一的測試設(shè)備，并不是很好的選擇。

• 被試者對設(shè)備的習(xí)慣問題

移動設(shè)備具備個性化，特別是智能手機(jī)，已經(jīng)成為個體的延伸。使用統(tǒng)一的測試設(shè)備，即使被試者的學(xué)習(xí)成本較低，還存在習(xí)慣問題。被試者不習(xí)慣統(tǒng)一的測試設(shè)備，可能會導(dǎo)致以下兩個的問題：一方面會增加被試者在測試過程中的緊張情緒；另一方面會降低被試者完成任務(wù)的效率。

• 被試者的隱私和意愿

移動設(shè)備比PC更能夠代表個體，存在很多被試者的隱私信息和一些個性化的內(nèi)容。被試者有時會不愿意使用他們自己的設(shè)備進(jìn)行測試。如果想要使用被試者自己的設(shè)備進(jìn)行測試，需要提前獲得被試者的許可，在招募階段就需要考慮這個因素，和被試者打好招呼。

• 場外干擾因素

使用被試者自己的設(shè)備進(jìn)行測試會帶來一個問題，在測試過程中很容易受到一些不可控因素的干擾，比如突然的來電、第三方軟件的干擾、電量不足等問題，也很難提前準(zhǔn)備和應(yīng)對。而如果使用統(tǒng)一的測試設(shè)備，這些問題就可以更好的避免。 接下來兩篇我們分別討論：

• 現(xiàn)場測試方法和工具
• 移動遠(yuǎn)程測試探索

3?參考

• Munesh Chandra and Mohammadi Akheela Khanum, “Role of Context in Usability evaluations: A Review”
• Harrison et al., “Usability of mobile applications: literature review and rationale for a new usability model”
• Nadav Savio, Jared Brauterman PhD, “Design Sketch: The Context of Mobile Interaction”
• Razak, F.H.A., Hafit, H., Sedi, N., Zubaidi, N.A.,Haron,? “Usability testing with children: Laboratory vs field studies”
• Oh, K., & Kim, “Social Attributes of Robotic Products: Observations of Child-Robot Interactions in a School Environment”
• Pamela Pavliscak,”Making the Most Out of Mobile Testing”
• Rudy Schusteritsch,Carolyn Y. Wei,Mark LaRosa,”Towards the perfect infrastructure for usability testing on mobile devices”

查看更多：

移動可用性測試（一）：概述

來源：騰訊ISUX