給應用商店頁面做A/B測試的七種方法
文章對AB測試的方法做了一些分享和解讀,來,發車!
如果有高人指點,只要你更改 App Store 商品詳情頁的一個圖形元素,就能讓應用轉化率提高 66%,猜你二話不說就會去做!
可惜,這樣的高人并不存在,但是這個例子只是為了說明:?A / B測試對于應用在市場的表現情況至關重要!轉化率每增加 1%,你的收益將增加 1%。這就是現實!
此時你們的的疑問應該是:“常年都在說 A / B 測試這個老梗,有沒有具體的測試流程呢?”
今天的文章中,我們會向你詳細介紹 A / B 測試的方法,看完之后你就沒有任何借口不做 A / B 測試了喲!準備好了嗎?開車!
Google Play 自帶 A / B 測試功能,如果你的產品在這個平臺發布,那做 A / B 測試就很方便。但如果你的應用發布于 iOS 平臺,就要麻煩一些。
哪些內容需要測試?
這個問題的答案視不同情況而定,總結來說:觀察 App Store 的商品詳情頁,最容易被忽略的內容則是最最需要測試的內容。假如你的 icon 設計得精致又特別,相比下來截圖顯得暗淡無趣,那你就可以先從截圖入手,換一些效果同樣醒目的截圖,看看哪個效果更好。
根據 StoreMaven 的數據顯示:視頻、截圖和圖標是最影響轉化率的幾個因素。StoreMaven 對不同的因素做了一個影響力分析,請見下圖:
在哪里查看轉換率?
如果你的應用是在 Google Play 發布的,在“Acquisition Reports”標簽下即可查看自然下載的轉化數據。Google Play 可以顯示基準數據,讓你查看自己的 App 與同類應用表現的差距。
如你所見,如果你的應用轉化在所屬類別中的平均值之下,Google 會告訴你,你還有多少下載量的差距。
要查看 iOS 商店的轉化率,請打開 “Analytics” 頁面,然后點擊“轉化率”。 選擇此選項后,圖表將顯示每日的轉化率。
如果你想在 iOS 控制面板只看到自然用戶的數據,請為“App Store Browse”或“App Store Search”設置過濾器,如下所示:
1.?肉眼觀察法
這種方法勉強稱之為 A / B 測試吧,但還是可以了解到哪些素材的表現更好。如果你期待看到很明顯的轉化率提升效果,建議不要依賴使用這種方法。
優點
- 免費
- 簡單易上手,只需上傳新素材,等待幾周,然后比較前后的轉換率
缺點
- 效果不準確,反彈嚴重
- 即便不做測試,轉換率的波動每月也會高達50%,會誤導測試假設
無發布前測試
你必須先發布產品,才能使用此測試方法。比較適合已經穩定的產品。
測試周期長
為了看到明顯的效果,你必須留出足夠長的時間來收集數據,少說兩三周,多則一兩月。
這種方法適用于哪種情況?
- 你的應用僅發布于 iOS 平臺
- 沒有付費廣告的預算
- 沒有網站的登錄頁面可以運行測試
- 你百分之百確定新的變化將提高轉化率
2.?Google Play 的 A / B 測試
如果你的App發布于 Google Play,可以使用這個方法。
在 Google 后臺,你可以對圖標、描述、功能圖形,截圖和促銷視頻等進行A / B測試。
設置 Google 測試很簡單。打開 Google Play 信息中心,然后點擊此處:
這里有兩種測試類型:
全球范圍:全球測試會向全球所有用戶展示你的測試素材。比較適合不涉及文本(如圖標)的元素,不會因為語言不通產生理解上的問題。
本地測試:僅針對目標語言的用戶展示本地化測試。適合測試包括文本類(如標題)的元素,測試的人群會更精準。
設置好了測試項并開始運行,它應該是這樣的:
測試開始后,你能做的就是等待。當測試達到90%的置信度時就會結束,你的數據就可用了。以下是 Google 關于如何在 Store Listing 中運行 A / B 測試的文檔,可供您參考:
https://support.google.com/googleplay/android-developer/answer/6227309?hl=zh-Hans
優點
- 免費
- 數據準確。來自Google 官方的數據可靠度還是杠杠滴。當然,統計學意義和“90%置信區間”允許出現一些誤差。
- 操作方便。只需要提交你需要測試的內容素材即可
缺點
- 僅適用于Google Play。希望蘋果公司能夠發布自己的 A / B 測試工具,但目前只是夢想
- 如果你在 Google Play 和 iOS 商店中都有應用,可以使用 Google Play 商店的 Store Listing 進行測試,然后將最好的結果應用于 iOS 商店
無發布前測試
你需要先發布的應用,再進行測試。
適合哪種情況
你的應用在Google Play上發布
3. 第三方測試軟件
如果你手里有預算,我們建議你使用像 SplitMetrics,Storemaven 或 Test Nest 之類的第三方測試服務來模擬應用商店頁面進行A / B 測試。根據我們的經驗,他們給出的分析報告算是比較專業的。
你只需要創建測試活動,然后設置好變量,觀察效果即可。
例如,你可以創建兩個模擬應用頁面,每個頁面都有不同的圖標。通過 Facebook 廣告或其它任何流量來源,查看哪一個轉化最好。用戶點擊模擬應用頁面上的“安裝”后,將被引導到產品的登錄頁,如果用戶感興趣,會在這里注冊并留下自己的賬戶信息。
以下是 Illusion Labs 進行的一個實驗,他們測試了 3 種不同圖標的效果。
正如你所看到的,第一個版本的圖標轉換效果是最好的,這也是他們最后采用的圖標。
優點
- 可以做預發布測試。在 App 正式發布之前就可以測試一些元素
- 允許一次測試更多的變量
- 支持使用像 AppsFlyer 這類歸因鏈接來跟蹤用戶行為。比如用戶下載之后的購買行為等
例如,也許變量 A 比變量B的轉化高 10%,但 AppsFlyer 的數據顯示,看到變量B比變量A的用戶多消費了 20%。你會選哪個變量?當然是變量 B 啦!
缺點
- 費用支出不能少,運行測試所需軟件的價格是每月? ?$149(TestNest)起
- 測試的過程中會有用戶流失。當用戶點擊模擬應用頁面上的“安裝”時,他們并沒有被直接跳轉到真實的應用下載界面,而是需要兩次或多次點擊和跳轉。在此過程中,就會有一部分用戶流失
這種方法適合哪些情況?
- 多適用于 iOS 平臺的應用
- 預發布 A / B 測試
- 有測試預算,并且同時開啟付費廣告活動
4. 付費廣告素材測試
付費廣告即 Facebook 廣告或其它廣告聯盟提供的推廣服務。如果你有投放廣告的需求,那你就有對廣告素材進行 A / B 測試的需求。
運作模式就是同時投放多組廣告素材,直接使用 Facebook 廣告來測試你的廣告素材。看起來像這樣:
Facebook 以外的其它廣告聯盟,也可以在廣告中測試圖標、描述或截圖。
例如,如果使用 Chartboost,你可以測試這些:
以下是 Chartboost 的其他鏈接:通過社交元數據將你的移動廣告轉化率提升高達 15%。
優點
- 比第三方測試軟件便宜
- 支持預發布測試
- 可以一次測試多個變量。
缺點
- 結果會有偏差。雖然這種方法可以幫助你了解最佳轉化方式,但數據比起專業測試軟件還是不夠準確。這是因為廣告與應用商店頁面的展示效果不同,用戶看到的內容也不同
這種方法適用于哪種情況?
- 多適用于 iOS 平臺的應用
- 需要進行預發布測試的應用
- 有廣告投放預算的應用
5. 登錄頁上的 A/B 測試
如果你的應用有一個獨立的登錄頁,這里也可以用來測試不同的圖形元素哦。
你可以使用 Optimizely 或 Google 優化等服務在登錄頁上直接對圖標、截圖、描述、標題甚至價格進行測試。比如下圖這樣:
優點
- 支持發布前測試
- 如果你已經設置了一個網站并開始運行,你需要做的就是安裝 A / B 測試工具并運行測試
缺點
- 由于網站上的上下文與實際的應用商店頁面不同,因此結果可能會有偏差
- 昂貴又耗時。至少要有一個可用的登錄頁,其次這個網站的流量還要大
這種方法適用于哪些情況?
- 多適用于 iOS 平臺的應用
- 需要進行預發布 A / B 測試
- 有可用的登錄頁面,以及足夠的流量可以運行 A / B 測試
6. 應用墻測試
如果你的品牌下有多個應用,那你可以在自己的另一個應用中設置一個應用墻,以交叉推廣自己的不同應用。順便,還可以再這里做做測試。
優點
- 免費。設置好了應用墻,所有當前用戶都將免費為你做 A / B 測試!
缺點
- 由于環境與實際的應用商店頁面不同,因此結果可能會偏差
- 根據你用戶量的限制,測試需要的周期會被拉長
這種方法適用于什么情況?
你至少需要一個用戶量還不錯的同類應用
7. 社交媒體投票測試
你可以在 Facebook 小組、Subreddits 這些地方發起投票測試,甚至可以向朋友和家人展示變量。比如這樣:
這里有一些可以發起發起投票的平臺:
- Facebook – 應用企業家和營銷組
- Reddit – 反饋請求示例
- Pickfu(付費)- 能為你提供變量的比較結果。只需 20 美元就可以獲得 50 份投票
優點
- 便宜、易操作。將你的投票問卷發送給一群人即可。即使是付費投票,也會獲得性價比很高的投票結果
- 可以獲得投票者的反饋
缺點
- 準確度不高。通常情況下,他們可能會選擇最漂亮或炫目的圖標,但不見得就是轉化率高的圖標
這種方法適用于哪種情況?
- 多適用于 iOS 平臺的應用
- 需要收集用戶反饋
結論
現在無論你的產品在什么平臺發布,你都沒有理由不做 A / B 測試了。
最后一個建議是,你可以先從定性方法(如投票)開始測試,以確保方向正確。
如果你的應用尚未發布,你正在猶豫在圖標和截圖到底用哪一版。不妨來一波測試看看大家的選擇是什么。
本文由 @ASO+ 原創發布于人人都是產品經理。未經許可,禁止轉載。
題圖來自PEXELS,基于CC0協議
- 目前還沒評論,等你發揮!