運營技巧 | 文案A/B test該如何操作?
今天分享的內容是短信A/B測試的思路。
觸點渠道的尷尬
文案的A/B Test相信大家都接觸過,做過,或者聽過,所謂文案A/B Test就是選一類或兩類用戶作為樣本,通過對他們投放不同的文案,來找到究竟哪種文案對官方希望引導的行為更有幫助,然后再向更大樣本的用戶群進行推廣的一種測試方法。
所以,你看,它是一種測試方法。
好多年以前,當我們討論一個活動推出去,如果沒有人來參加能夠做什么,這樣的話題的時候,其中有一個方法就是:
把活動廣告圖做些調整,然后重新投放試試引流效果會不會好一些。
這種方法其實是A/B Test的延續,也可以從另一個角度認為這種方法是A/B Test尚未流行時的有同樣原理的粗糙原型。
只是,如果將這種方法提前到活動開始前的預熱,對不同渠道的同一類用戶推送不同內容的預熱文案,甚至預熱頁面的時候,就可以在正式活動時的Banner設計上做得更加精準。
而短信、EDM這些渠道也都是如此。
只是,由于短信和EDM渠道被早年的電商玩得有點壞——幾乎所有渠道的電商測試出來的效果,都是用戶要優惠,于是,所有電商的思路也都很一致的推薦打折信息、活動信息,用戶疲勞之后,再利用這些渠道就比較困難。
但實際上,這依然是因為對用戶的理解太粗放導致的。
而尷尬的是,即使是在智能手機的Push上,也嫌少有應用真正做到十足的精細,不信看圖:
亮哥把手機上有關電商與導購的一些Push留了下來,大家可以看一下,除了第一張圖,紅線框出的部分,可以肯定是天貓根據之前的購買習慣Push給用戶的,其他的看起來大多數都和用戶的習慣沒什么關系,但是和企業的需求有直接關系。
說實話,連天貓這個消費習慣Push我都有點不想打開——因為濕巾每次買都會很多,而消耗起來又沒有那么快,其他的Push就更加不會打開了。
短信神馬的,是不是一樣的邏輯,所以用戶才會拒絕去看呢?
精細化是方法論
所以,很簡單的一個邏輯就是:
如果我能夠知道我的用戶care什么,那么我就可以將最適合他的展示給他,以此獲得他對我價值的認可。
而如何知道他care什么,就是我們要通過A/B Test獲取的東西。這里有一些方法,可是去嘗試一下:
- 建立假設
- 分類設計
- 分批推送
- 效果回收
- 實測驗證
- 形成結論
這六步就是我接下來要說的方法,下面就一個一個展開:
1、建立假設
首先,對于你的用戶要建立假設,這個假設并不是每一個人為什么來你這里買東西,而是,到你這里買東西的用戶最care什么。
其中,可以提煉出一些關鍵詞。
這些關鍵詞,需要去匹配一些近義詞或結果差不多但表達相反的詞匯。
譬如,節省時間-提高效率;省力-代勞;……等等
這一步是為了要有一個大概的認知:我這次的測試主要測試用戶對哪些詞更敏感,更敏感的詞應當切中用戶更需要的點,以此來推進設計。
2、分類設計
當你挑選出不同的假設敏感詞組之后,一定會形成不同的畫像人群,這些畫像用戶需要圍繞敏感詞組來對應設計。
譬如我曾經開過玩笑,AirBnb的User Referral文案:
「Give your Friend $15?」與「?Invite a Friend,Get $15」
這倆文案,放在歐美的測試結果可能是第一種好,但放到亞洲,可能就是第二種好了。
之所以開這個玩笑,是因為在我的假設里,亞洲人或中國人更喜歡強調保障自己的利益,歐美人更喜歡分享自己的利益。
但是這僅僅是開玩笑的假設,事實上并沒有任何證明。
聊這個,只是為了強調:人群的差異要體現在文案設計上。
3、分批推送
當你有了畫像之后,原則上你就可以篩選出對應的用戶,但由于我們要做測試,所以,可能我們只會限定一定比例樣本的用戶會收到該文案。
這時候,文案的推送一定是分批次進行的,譬如對象用戶一共10000個人,我分了兩類各5000人,那么先各推1000人試試,看看究竟哪一種文案看起來效果好,然后再根據效果來做后續的推送。
4、效果回收
不論是什么渠道,一定要有能夠驗證效果的數據,譬如:
鏈接點擊次數、頁面到達人數,等等。
所以,文案推送之前,相關的數據埋點就一定要具備,文案推送之后,就要開始關注相關的數據變化情況。以此來區分不同文案之間對用戶的差異。
5、實測驗證
這里既可以稱實測,也可以稱為后續。
之前的兩組5000人,我們都只推送了1000,那么剩下的4000也一樣要推掉,這時候我們就要開始嘗試做一件事兒了:
合并文案。
也就是對最后剩下的人,推送同樣的的文案。
這時候要考慮的是,剩余的總共8000人,應該分幾次去推,每一次推又希望驗證什么。
這里的方法就很多了,譬如:
- 先調換文案,再各推1000人,然后視效果合并;
- 直接合并,推剩余的8000人;
- 不合并,各自按照此前的方法推送;
……
6、形成結論
不管你在第五步是否做了文案合并,最終推送完成后你都要形成結論,即,用戶更偏愛哪一種或哪一類文案,在同類活動、內容、商品推送時,應該使用哪一類文案。
就這么簡單。
#專欄作家#
張亮,微信公眾號:zhangleo1983,人人都是產品經理專欄作家。知乎大V,互聯網從業者;《從零開始做運營》作者。聊產品聊運營,偶爾深度。分享一切有益有趣的內容。
本文原創發布于人人都是產品經理,未經許可,不得轉載。
- 目前還沒評論,等你發揮!