運營技巧 | 文案A/B test該如何操作?

0 評論 15958 瀏覽 58 收藏 9 分鐘

今天分享的內容是短信A/B測試的思路。

觸點渠道的尷尬

文案的A/B Test相信大家都接觸過,做過,或者聽過,所謂文案A/B Test就是選一類或兩類用戶作為樣本,通過對他們投放不同的文案,來找到究竟哪種文案對官方希望引導的行為更有幫助,然后再向更大樣本的用戶群進行推廣的一種測試方法。

所以,你看,它是一種測試方法。

好多年以前,當我們討論一個活動推出去,如果沒有人來參加能夠做什么,這樣的話題的時候,其中有一個方法就是:

把活動廣告圖做些調整,然后重新投放試試引流效果會不會好一些。

這種方法其實是A/B Test的延續,也可以從另一個角度認為這種方法是A/B Test尚未流行時的有同樣原理的粗糙原型。

只是,如果將這種方法提前到活動開始前的預熱,對不同渠道的同一類用戶推送不同內容的預熱文案,甚至預熱頁面的時候,就可以在正式活動時的Banner設計上做得更加精準。

而短信、EDM這些渠道也都是如此。

只是,由于短信和EDM渠道被早年的電商玩得有點壞——幾乎所有渠道的電商測試出來的效果,都是用戶要優惠,于是,所有電商的思路也都很一致的推薦打折信息、活動信息,用戶疲勞之后,再利用這些渠道就比較困難。

但實際上,這依然是因為對用戶的理解太粗放導致的。

而尷尬的是,即使是在智能手機的Push上,也嫌少有應用真正做到十足的精細,不信看圖:

亮哥把手機上有關電商與導購的一些Push留了下來,大家可以看一下,除了第一張圖,紅線框出的部分,可以肯定是天貓根據之前的購買習慣Push給用戶的,其他的看起來大多數都和用戶的習慣沒什么關系,但是和企業的需求有直接關系。

說實話,連天貓這個消費習慣Push我都有點不想打開——因為濕巾每次買都會很多,而消耗起來又沒有那么快,其他的Push就更加不會打開了。

短信神馬的,是不是一樣的邏輯,所以用戶才會拒絕去看呢?

精細化是方法論

所以,很簡單的一個邏輯就是:

如果我能夠知道我的用戶care什么,那么我就可以將最適合他的展示給他,以此獲得他對我價值的認可。

而如何知道他care什么,就是我們要通過A/B Test獲取的東西。這里有一些方法,可是去嘗試一下:

  1. 建立假設
  2. 分類設計
  3. 分批推送
  4. 效果回收
  5. 實測驗證
  6. 形成結論

這六步就是我接下來要說的方法,下面就一個一個展開:

1、建立假設

首先,對于你的用戶要建立假設,這個假設并不是每一個人為什么來你這里買東西,而是,到你這里買東西的用戶最care什么。

其中,可以提煉出一些關鍵詞。

這些關鍵詞,需要去匹配一些近義詞或結果差不多但表達相反的詞匯。

譬如,節省時間-提高效率;省力-代勞;……等等

這一步是為了要有一個大概的認知:我這次的測試主要測試用戶對哪些詞更敏感,更敏感的詞應當切中用戶更需要的點,以此來推進設計。

2、分類設計

當你挑選出不同的假設敏感詞組之后,一定會形成不同的畫像人群,這些畫像用戶需要圍繞敏感詞組來對應設計。

譬如我曾經開過玩笑,AirBnb的User Referral文案:

「Give your Friend $15?」?Invite a Friend,Get $15」

這倆文案,放在歐美的測試結果可能是第一種好,但放到亞洲,可能就是第二種好了。

之所以開這個玩笑,是因為在我的假設里,亞洲人或中國人更喜歡強調保障自己的利益,歐美人更喜歡分享自己的利益。

但是這僅僅是開玩笑的假設,事實上并沒有任何證明。

聊這個,只是為了強調:人群的差異要體現在文案設計上。

3、分批推送

當你有了畫像之后,原則上你就可以篩選出對應的用戶,但由于我們要做測試,所以,可能我們只會限定一定比例樣本的用戶會收到該文案。

這時候,文案的推送一定是分批次進行的,譬如對象用戶一共10000個人,我分了兩類各5000人,那么先各推1000人試試,看看究竟哪一種文案看起來效果好,然后再根據效果來做后續的推送。

4、效果回收

不論是什么渠道,一定要有能夠驗證效果的數據,譬如:

鏈接點擊次數、頁面到達人數,等等。

所以,文案推送之前,相關的數據埋點就一定要具備,文案推送之后,就要開始關注相關的數據變化情況。以此來區分不同文案之間對用戶的差異。

5、實測驗證

這里既可以稱實測,也可以稱為后續。

之前的兩組5000人,我們都只推送了1000,那么剩下的4000也一樣要推掉,這時候我們就要開始嘗試做一件事兒了:

合并文案。

也就是對最后剩下的人,推送同樣的的文案。

這時候要考慮的是,剩余的總共8000人,應該分幾次去推,每一次推又希望驗證什么。

這里的方法就很多了,譬如:

  • 先調換文案,再各推1000人,然后視效果合并;
  • 直接合并,推剩余的8000人;
  • 不合并,各自按照此前的方法推送;

……

6、形成結論

不管你在第五步是否做了文案合并,最終推送完成后你都要形成結論,即,用戶更偏愛哪一種或哪一類文案,在同類活動、內容、商品推送時,應該使用哪一類文案。

就這么簡單。

#專欄作家#

張亮,微信公眾號:zhangleo1983,人人都是產品經理專欄作家。知乎大V,互聯網從業者;《從零開始做運營》作者。聊產品聊運營,偶爾深度。分享一切有益有趣的內容。

本文原創發布于人人都是產品經理,未經許可,不得轉載。

更多精彩內容,請關注人人都是產品經理微信公眾號或下載App
評論
評論請登錄
  1. 目前還沒評論,等你發揮!