以頭條為例:談談推薦策略

5 評論 20843 瀏覽 222 收藏 14 分鐘

關于機器在用戶畫像和內容畫像精準構建出來之后,如何做推薦呢?本文以今日頭條為例,跟大家談談推薦策略。

關于推薦

首先,為了方便讀者更好的理解本文,筆者將以今日頭條(建議在手機上下好“今日頭條”APP,且最好注冊一個頭條號并登陸到后臺)這款產品為例輸出一些內容推薦(分發)相關的“干貨”。

回到標題,何為推薦?

簡言之:“物以類聚,人以群分”。

那何為物,何為人呢?

答:物為內容(文章/圖文/視頻等),人為用戶(刷今日頭條的用戶)。

那么機器怎么知道內容和人屬于什么類別(斷物識人)呢?

再答:“內容畫像”和“用戶畫像”的構建,而推薦的過程其實就是完成用戶和內容的匹配。

那么什么是“內容畫像”和“用戶畫像”呢?機器是如何對兩者進行精準構建和匹配呢?

內容畫像

內容畫像,簡單來說就是內容的特點。如果具象化內容,筆者更傾向于假設是一個內容漏斗(類似于倒三角形用戶漏斗,不過所示關系不一定為層級關系,見圖1)。第一層通常表示內容的一個垂直領域(大類別)而后面幾層可以大致表示為標簽/關鍵詞/主題詞等小類別。

(圖2:百度圖片,僅圖示忽略文字)

考慮到內容漏斗有很多層,為了便于理解,筆者簡單說一下用戶可以直觀看到的幾層。最顯眼的可能就是第一層了,在頭條(指今日頭條)內部通常指的就是垂類(垂直領域),如:科技、娛樂、體育等。

舉個栗子:筆者昨天發布的一篇軟廣,被機器識別成了“科技”領域的文章。那這個內容第一層就是科技,通常為機器標注(涉及NLP技術:文本分類、命名實體識別等)、人工手打(傳說中“打tag”的一種主要形式),或PUGC創作者(統稱:頭條號)在發布內容時進行領域選擇,不過,現在發布內容已不需要進行選擇。

顯然,光知道內容的大類并不能給用戶精準的推薦感興趣的內容。這里再講一層,其實也是一種打tag的形式(涉及NLP技術:文本主題/關鍵詞抽?。?,只是平臺根據用戶的喜好對內容做更進一步的更細化了。還是上面舉例的這篇文章,對應的一些細分tag就有vivo、手機、科技等。

當然,這個內容漏斗遠不及這兩層,細分其實有很多種,比如接著上文舉例的文章來說,漏斗可能是這樣的:科技->手機->Android->vivo->vivo旗艦機->vivo NEX->vivo NEX雙屏版。而細分的驚喜,內容畫像也就越清晰,推薦才越精準,當然,技術難度也是同樣提高的。

因此,像頭條比較強悍的競品之一,一點資訊號稱365萬個個性化訂閱頻道,可想后面支撐的一個推薦算法團隊是有多強。

當然,除了內容的特點之外,內容畫像還包含內容的質量、熱度、原創度、所發布用戶的權重等。而這個權重指的就是頭條對頭條號所發布文章的推薦權重(更多的是內容冷啟動推薦數量,以及后續推薦的加成幅度)。

說到推薦權重,就不得不提一下之前平臺為了讓頭條號作者們過新手/評原創有一個量化的指標,即頭條號指數(如圖6所示),而這個頭條號指數其實可以理解為平臺對于頭條號的一個打分,決定了頭條號所發布內容的推薦權重。而頭條號指數的評定標準有5大方面(如圖7):原創度、垂直度、關注度、健康度、傳播度。不過,現在頭條號Web端后臺已經看不到了,不過手機端還可以看到。

(圖7: 2017年6月26日筆者頭條號后臺)

用戶畫像

什么是用戶畫像呢?簡而言之就是你(顯式&隱式)的基本特征(比如:性別、學歷、年齡、常駐位置等)和興趣愛好(籃球迷、數碼控、動漫迷等)所構建出來的一個“屬性圖”(技術通常稱為“知識圖譜”)。

舉個栗子:我們通常被機器標注成一個數據組合(如圖9):科技 | 20%、體育 |10%、娛樂 | 30、養生 | 5%……..

(圖9:用戶畫像實例,來源《內容算法》)

那么問題來了,機器如何知道一個用戶的畫像呢?

首先,用戶分為新用戶和老用戶兩類。針對前者就涉及到了用戶畫像構建的一個常見且難點(策略產品面試比問)——(用戶)冷啟動,通常面試官會問你,如何做用戶冷啟動?

那么筆者告訴大家一個常見的答案:

  • 首先,新用戶打開APP會讓選擇喜歡的領域;
  • 其二,絕對的冷啟動并不存在,用戶在其他APP的行為其實也會被監督到,比如:你在淘寶看球鞋,打開頭條刷新聞就能刷到你剛看的那款球鞋的廣告,也就是說在你打開APP那一刻,你的一個比較明顯的屬性·體育|籃球已經被獲取了。
  • 其三,機器通常會給你推薦當前熱點內容「比如科技領域 | iPhone發布新品,娛樂領域 | 汪峰上頭條等」,通過你在這些內容下的用戶行為(點擊,點贊,轉發,跳出,停留時長等),機器會對屏幕前面的你有一個“初印象”。

通過你在不同領域內容的用戶行為,判斷你對內容的興趣度,從而構建你的一個初步用戶畫像(這是當前常用的一種用戶冷啟動方式)。比如:打開頭條,給你冷啟動推送了12條內容(3條NBA+3條娛樂+3條科技+3條美食),然后你點擊了3條體育,2條數碼,1條娛樂…..。

那么,最開始的用戶畫像(V1.0)可能為體育 | 30%,數碼領域 | 20%,娛樂領域 | 10%,其他領域 | 20%,目測是一名男性,愛好運動,科技宅等。然后,還發現里面2條體育內容都是和科比有關的,那么你大概率是個男性科密數碼控。

后來,你變成了老用戶,隨著你使用頭條的次數越多,你產生的用戶行為數據越多,背后的模型就會被訓練的越“聰明”。隨著你“刷”的越多,你的用戶畫像也會隨之發生不斷的變化,變得越來越細化,越精準。

如何推薦

最后,關于機器在用戶畫像和內容畫像精準構建出來之后,如何做推薦呢?

事實上,這其實就是一個匹配(match)的操作。當然,簡單說匹配筆者認為還是不夠恰當,因為除了這2個用戶畫像和內容畫像(相關性特征)之外,機器在訓練模型時還會考慮熱度特征(全局熱度、分類熱度等)、協同特征(相似用戶、興趣分類用戶等)、環境特征(時間、地理位置等),詳見圖10。

(圖10:來源文章“今日頭條算法原理(全)”)

那么,機器學習到了這些如圖6的這些特征之后,推薦模型就會被不斷的更新(準確的說是模型的參數在發生更新,如:神經網絡在做后向傳播時會在每一次迭代時發生相關權重參數的變化),最后機器呈現給不同用戶的內容也會因為這些特征的不同而不一樣,甚至同類型的用戶,也就是所謂的“千人千面”(最早用在電商平臺)。而作為內容“消費”平臺,這里主要指的是內容分發。

那么如何讓內容分發變得更加精準呢?

這里不得不提這兩個名詞,即:召回和排序。這里難講,簡言之,召回比較依賴于內容和用戶的標簽匹配度,而排序則涉及到一個用戶興趣傾向性,或者是一個更加細粒度的匹配問題上,因為要保證合適的內容放在合適的位置。

比如:筆者是一個數碼控,那如果推送12篇內容給我,我更傾向于第一篇是關于數碼的而不是娛樂的。而排序也往往能夠反映出推薦策略的優秀程度。因為只有讓用戶最快的觸達你感興趣的內容才會產生更多的留存,才會激活,才能進行轉化(才能更便于平臺推送廣告等商業化操作)。

當然,AI時代,決定模型表現,或者說我們這里的推薦系統(也可以理解為是一種機器學習模型)的表現,除了算法本身,還有算力(指的是計算機運算能力,這方面頭條和競品無法拉開差距,因為這是錢能夠解決的問題),還有另外一個關鍵項就是數據(高質量的數據)。

關于數據的重要性,讓我想到了帶我做科研的一位博士師兄(目前在Amazon做推薦)說過的一句話:“Garbage in, Garbage out”,而這句話更適用于AI+產品落地上。簡言之,數據對于推薦結果(或者說內容分發)的好壞起著十分根本性的作用。

說到這,請大家跟著筆者思考一個問題,頭條DAU(日活)據說2.4億+,而每個用戶日均使用時長70min+,假設用戶閱讀一篇內容(文章/視頻)的平均時間是2min,那么用戶閱讀內容數據得有2.4億*70/2 = 84億+(條)!。

所以,回到最開始的問題,為啥說頭條推薦如此牛逼呢?

那是因為推薦算法的3個核心壁壘,頭條都屬于業內前列(甚至可以稱得上是國內NO.1)。

One More Thing

以上,皆為筆者粗鄙之見,所講內容只是今日頭條推薦算法里的極少部分,背后的Model和Data十分龐大與強大,紕漏難免,還望諒解并給予批評指正。

另外,筆者認為機器(計算機)再厲害,也是人類所“賦予”的,機器越來越聰明的背后反映的應該是人(如:推薦算法團隊| Modeling & Data processing)在不斷的進化變強!

『參考』:

  • 閆澤華|《內容算法》
  • 今日頭條·曹歡歡博士|今日頭條算法原理(全):http://h5ip.cn/mgq9
  • Dietmar Jannach等著,蔣凡譯|《推薦系統 [ Recommender systems:An introduction]》
  • 項亮|《推薦系統實踐》

 

本文由 @不二互聯網-Alex 原創發布于人人都是產品經理。未經許可,禁止轉載

題圖來自Unsplash,基于CC0協議

更多精彩內容,請關注人人都是產品經理微信公眾號或下載App
評論
評論請登錄
  1. 不二互聯網!這個名字咋理解呀? ??

    來自湖北 回復
    1. 不二的互聯網事~哈哈哈,不二是作者名字。

      回復
  2. 我們家app還是手工千人千面_(:з」∠)_。關于冷啟動摸索用戶潛在標簽的方案確實很有意思和啟發。感謝賜教。

    回復
    1. 我們家還是千人一面,淚奔…

      回復
    2. 哈哈,目前來說很多大廠都是手動的,不過方向肯定還是機器 人的,也就是頭條的打法。

      回復