快速可用性測試案例之六:衛報變身之旅

1 評論 2319 瀏覽 6 收藏 17 分鐘

本文通過 3 個關于進行的不同類型的快速可用性測試的案例研究,來進行討論,并給你 10 個可用性測試技巧。

我做過題為“衛報通過快速可用性測試的變身之旅”的演講,我在衛報擔任首席用戶體驗官和信息架構師,我們每周發布六版《衛報》(The Guardian)和《周日觀察報》(The Observer)。我們的網站 guardian.co.uk 每個月有超過 5000 萬用戶訪問,其中 1/3 居住在美國。

雖然我們的軟件開發過程是敏捷的,并且我們試圖以用戶為中心的方式做許多事情,在文化上我們習慣于保密,并且作為新聞組織,要非常謹慎地放棄“獨家”。

在英國,報紙使用晚上播出的電視新聞節目作為頭版掩飾他們將在早上發布的真正的獨家新聞,以避免競爭對手與它競爭,這是眾人皆知的。而在 Twitter 上發布前的幾天,記者靠筆記本上的聯系人的價值或生或死。

在《衛報》(The Guardian)和《周日觀察報》(The Observer)之間,有著 400 年關于印刷“獨家”的保密史。

我們公司有一個非常出色的研究和客戶洞察部門,他們提供了很好的市場調查,并幫助促進正式的測試類型,但是,有關保密相關的事項有時很難在開發項目早期完成用戶測試。

而且測試的預算總是很緊張,為了對抗這一點,我開發了一系列技術來開展快速可用性測試,通過接觸公共場合的人,記錄他們使用和談論產品的過程。

這個過程并不是——必須說純數學或科學的。

該方法有很多不足。但是,所有類型的可用性測試都會有一些固有的偏見。我相信,在這些限制內,快速可用性測試是一個非常好的工具。

我想通過 3 個關于我進行的不同類型的快速可用性測試的案例研究,來進行討論,并給你 10 個可用性測試技巧。

衛報招聘網站測試

我進行網站快速可用性測試的首批項目之一是重新設計了我們的招聘網站——Guardian Jobs。我們在倫敦贊助了畢業生招聘會,在展覽空間中占據了一個非常有利的位置。該展臺放了幾臺筆記本電腦,可以在上面瀏覽就業網站以及我們的招聘網站,我們在上面發布信息和內容以幫助人們了解員工的工作生活。

為了進行測試,我們用自己的 Mac 取代了其中一臺電腦,我使用 Silverback App 軟件錄屏,同時還通過網絡攝像頭錄制視頻和音頻。即便拍攝得不好,這也十分有用。事實上,有幾個人根本沒有出現在鏡頭中,就那樣我仍然拍到了一些有用的鏡頭。這不是個大問題,因為我捕捉到了他們的聲音和屏幕上的動作。

我沒有任何正式的測試腳本,相反,我問他們之前是否曾經用過該網站,以及他們是否用過的其他網站。然后我會告訴他們這個網站,就能看到他們的反應了。

第一批學生對使用電腦錄頻的想法感到震驚,我了解到,獲得合作最簡單的方法就是說一些含糊其辭的話,比如:“筆記本電腦會記錄你的工作”而不是“你將被錄像”。這不是嚴格的不真實,但它有點不坦率,我也沒有讓測試者簽署任何形式的許可或授權書。

理解這一點非常重要,盡管我已經獲得了測試的許可。但我沒有獲得任何許可,將業務以外的視頻重新分配的話。

出于這個原因,我從來沒有向同事以外的人展示過鏡頭。雖然這是一種務實的方法,但是為了增加參與測試的人數,這是一種恥辱,這使我獲得了很多值得分享的教訓。

我展示了一個 5 分鐘的視頻展,并且用 30 秒的時間介紹了快速可用性測試,并設置了場景。我沒有按順序向每個用戶展示,按實際情況進行了調整。我使用幻燈片來顯示問題,然后快速切換各種回復,確保我涵蓋了想要表達的各種觀點。

這不是正式的測試,所以我沒有針對用戶界面提出任何具體的建議。然而,我們確定畢業生求職者似乎不太可能像使用 LinkedIn 一樣尋求求職服務,也不太可能在 Twitter 上找到有用的服務,而是希望找到“通過電子郵件求職”這種十分具體的項目。

我還收到一些反饋,畢業生通過瀏覽類似“工程”等領域,或選擇入門級標準(如:“畢業生就業”),來尋找他們的第一份工作。

iPhone 應用程序測試

當我們決定推出 iPhone 應用時,我們進行了多次測試。我們通過網站彈窗的形式,招募測試用戶。我們希望招募那些對品牌已經建立認知和信任我們的人,并且他們是早起用戶,所以我們選擇了“技術”新聞部分的用戶。招募的用戶來到我們的辦公室,并使用應用的早期版本進行了 45 分鐘的測試。

測試由產品經理和我自己進行,畢竟我可是項目的信息架構師。當然,這會打破許多關于如何進行經典實驗室可用性測試的規則。測試用戶知道他們正在測試的產品和品牌,進行測試的人正在密切合作。盡管如此,這也是十分有價值的。

這部分的測試還是通過使用 Silverback 進行記錄,Silverback 使用電腦上的網絡攝像頭記錄測試。此外,在測試過程中,一個小型翻轉攝像機將拍攝測試用戶與應用的互動。兩種方式錄制的視頻都是低保真的,這很難獲得用戶與應用交互的精確細節。但是,這足以滿足我們的目的了。

盡管只有少數測試用戶,但我們發現了幾個關鍵的可用性問題,引導我們將如何重新構建應用。就圖片庫這個功能來說,我們使用了非標準的 UI。用戶不僅可以在界面中從左向右滾動,還可以垂直滾動。正如預期的那樣,用戶對此十分驚訝,但由于他們發現的內容非常吸引他們,所以我們發現了這個驚喜。

第二個問題是我們在應用中為“相關主題”提供了引導。我們網站上的所有內容,都標有一系列描述新聞主題的關鍵詞。在設計過程中,我們認為在移動設備上深入了解主題和主題層次結構,是令人厭煩的交互過程,并且已經找到一種方式來優化它。

我們的解決方案是關鍵字列表,點擊此位置會彈出圖層,列出了所有關鍵字。這樣用戶可以通過點擊便簽,就能夠直接瀏覽特定主題的標簽頁。

在測試過程中,我們發現用戶似乎很喜歡這種方式,但同時我們也發現了一個問題。在我們的測試版中,激活彈窗圖層的可點擊區域太小,作為測試結果,我們擴大了可點擊區域,并改進了功能。

測試的關鍵輸出之一不是測試結果本身,而是視頻等材料。我剪輯出一個 6 分鐘的左右視頻,展示了人們對應用設計的積極反應,討論了多少人——如果有的話將會為該應用付費,并努力發現和使用需要改進的一些功能。我將視頻放在我們的內網上,并在公司討論該項目的一些高級別會議上進行展示。

測試“文化”消費和態度

我所進行的第三種“測試”是更加環保,而且根本沒有專注于任務。衛報最近的一項重大舉措是在網上重振我們的藝術和文化,目的是納入更多用戶的意見和建議,并允許用戶在所涵蓋的內容中發表更多,我想了解我們的核心受眾對此的反應是怎樣的。

為了做到這一點,我與產品經理和設計經理花了一天時間,參觀倫敦的藝術場館和藝術中心等地方,我們參觀了巴比肯(Barbican)、南岸中心(Southbank)和 BFI。我們認為這些地方,是找到對倫敦藝術圈感興趣的用戶最合適的地方。實際上,我們將場地作為“篩選問題”。

總而言之,我們與大約 35 人進行了交談,其中超過30 人都是衛報的讀者或網站用戶,我們確定已經找到了合適的地方。

我們靠近他們,并坐在他們身邊,他們三三兩兩的湊成小組。我們用電腦和 Silverback 來記錄他們對我們現有網站的反應,或者使用 Flip 攝像機拍攝。

我再次將它編輯成一個可放在內網上的以主題排列的內容,然后用于與主要利益相關者和董事會成員的主要演講。雖然招募帶有明顯的傾向,這些發現卻完全是隨機的,但它們仍然非常有價值。

我們有一個非常強烈的感覺,那就是在《衛報》和《觀察者》上作者的聲音,這在我們的文化中很受重視,同時人們對他人的評論也很感興趣,但這不是人們來到我們的網站的主要原因。我們也發現有些人不愿做出貢獻,如評論。

這對該項目非常重要,因為在此之前,圍繞構建新功能的許多討論大多會基于“超級用戶”貢獻大量內容的假設。用戶測試使我們能夠在內部重新設定預期和目標,讓我們的大多數用戶愿意撰寫評論。

那什么時候一切都出錯了呢?

你需要知道此類測試什么時候事無效的。你依靠的是有時用非常特殊的方式招募的測試用戶,有時候沒有對他們進行大量預先篩選,了解這類測試的局限性非常重要。

我們在開發過程中多次采用臨時方式對其進行測試,上一輪之后我們的建議是需要對精心招募的用戶組進行更正式的測試。我當然不是僅做此類測試的倡導者——但我認為它可以在產品構建過程中增加有價值的見解。

十個注意點

所以,如果你認為這些案例研究在你的組織中可能有更多的適用空間,這里有十個注意點:

  1. 合適的軟件:用來記錄和拍攝東西。
  2. 讓計算機界面整潔:不要讓用戶分心。
  3. 使用新的瀏覽器:要清除歷史記錄。
  4. 帶上其他人一起:人多力量大。
  5. 準備開場白:不斷接近他人,確定合適的對白。
  6. 準備即興創作:如果你偶然發現有人說他們是你的所有服務的用戶,那也要準備好測試。
  7. 制作小視頻,而不是大電影:嘗試對所有有用的東西進行“最大化”剪輯,然后將其編輯為小視頻。
  8. 了解你的限制:有一個原因,我沒有在演示文稿中顯示任何片段。我被同意進行測試,但我沒有獲得重新分配錄像的授權。
  9. 這不是科學:這是快速、骯臟和便宜的手段。確保其他人知道這一點。
  10. 對每個人都要禮貌:不僅僅是對用戶,即便你你在咖啡館附近,也要先問一下對方是否有時間,然后買咖啡請客。

結論

快速可用性測試不是實驗室測試的替代品,它存在缺陷和固有偏見。但是,每種類型的測試都有缺陷和內在偏見。實驗室環境會讓用戶感到不安,遠程測試人員是自我選擇的,移動研究正在努力復制使用環境,而在問卷調查時測試用戶很容易忘記。但只要意識到你使用的方法都存在缺陷,就可以獲得寶貴的見解并改進產品。

在衛報上,引入快速可用性測試為我們改進產品提供了一條新途徑,特別是通過我們的移動應用,已成為產品開發流程的重要部分。人們現在總會問我什么時候要測試他們正在開發的東西,而不是是否要測試它。

致謝

在過去的幾年里,衛報的許多同事幫助我進行這些測試,如果沒有 Karen Loasby、Jonathan Moore、Katie Le Reuz、Piers Jones、Tara Herman、Martin Reddington、Andy Brockie、Lianne Katz、Barry Ainslie、John-Henry Barac、Jim Mann、Olivia Horsfield、Dan Botten 以及 Pearlyn Quan 等人的幫助,我們將無法進步。謝謝。

相關閱讀

Guerilla 可用性測試案例之一:Airbnb 愿望清單功能

Guerilla 可用性測試案例之二:Dropbox 照片功能

快速可用性測試案例之三:Apple iCloud 照片共享功能

快速可用性測試案例之四:Yelp 提升 Web 體驗

快速可用性測試案例之五:SoundCloud 移動應用重新設計

 

原文作者:?Martin Belam,I’m a designer and journalist, and I am Social & New Formats Editor at the Guardian.

原文地址:http://www.currybet.net/cbet_blog/2011/06/changing-guardian-guerilla-usability-testing.php

#專欄作家#

鄭幾塊,人人都是產品經理專欄作家,前新浪微博產品經理。

本文系作者@鄭幾塊 獨家授權發布,未經本站許可,不得轉載

題圖來自 Pixabay,基于 CC0 協議

更多精彩內容,請關注人人都是產品經理微信公眾號或下載App
評論
評論請登錄
  1. 目前還沒評論,等你發揮!