推薦系統(tǒng)絕對不會向你推薦什么
講完了推薦算法是如何“猜你喜歡”的,現(xiàn)在,你對于每回上網(wǎng)購物時在線零售商是如何打量你,并努力把你的喜好和其他人的相匹配有了一個基本的概念。
推薦系統(tǒng)還有另外兩大特點(diǎn),也對你最終看到的推薦結(jié)果有著顯著的影響:第一,在弄清楚你和其他購物者的相似度有多高之前,推薦系統(tǒng)必須先弄明白你真正喜歡什么;第二,推薦系統(tǒng)依照一組商業(yè)規(guī)則運(yùn)行,以確保推薦結(jié)果既讓你覺得有用,也使商家有利可圖。
推薦算法是如何贏得你的信任,又讓商家有錢可賺的?
采集你的上網(wǎng)數(shù)據(jù)
舉個例子,來看亞馬遜的藝術(shù)品商店,上次我們?nèi)タ吹臅r候那里有 900 多萬冊印刷品和海報在降價促銷。亞馬遜的藝術(shù)品商店有這樣幾個方法來評估你的喜好。它會讓你在 1 到 5 顆星的等級上給某一件藝術(shù)作品打分,它也會記錄下你把哪些畫點(diǎn)擊放大了來看、哪些畫你反反復(fù)復(fù)看了好多次,你把哪些放進(jìn)了心愿單,還有你最終實(shí)際下單買了什么。它還會追蹤在你瀏覽過的每一個頁面上都顯示了哪些畫作。在線零售商會使用你在其網(wǎng)站行進(jìn)的路徑(你瀏覽過的頁面和點(diǎn)擊商品的鏈接) 來向你推薦相關(guān)聯(lián)的商品。此外,它還把你的購買記錄和打分信息結(jié)合起來,建立一個你長期購買偏好的檔案。
像亞馬遜這樣的公司會收集大量此類有關(guān)客戶的數(shù)據(jù)。在你登錄期間,你在它網(wǎng)站上的幾乎每一個動作都會被記下來,留作將來使用。多虧有了瀏覽器 cookie,連匿名購物者的上網(wǎng)記錄商家也能維持,最終這些數(shù)據(jù)將在匿名購物者創(chuàng)建賬戶或者登陸時,鏈接到顧客的個人資料。這種爆炸式的數(shù)據(jù)采集并非為在線商家所獨(dú)有,沃爾瑪便以其對現(xiàn)金收據(jù)數(shù)據(jù)的深入挖掘而著稱于業(yè)界。但是,網(wǎng)上商店處在一個更有利的位置去查看和記錄,不止是消費(fèi)者買了些什么,還包括你曾考慮過、瀏覽過和決定不買哪些商品。在全世界大部分地區(qū),所有這類活動都是任人監(jiān)視和記錄的;只有在歐洲,數(shù)據(jù)隱私法在一定程度上限制了這種操作。
當(dāng)然,不論法律如何,顧客發(fā)現(xiàn)自己的數(shù)據(jù)被人濫用后,都會產(chǎn)生強(qiáng)烈的抵觸情緒。早在 2000 年 9 月,亞馬遜吃過一次苦頭:有一部分顧客發(fā)現(xiàn)他們收到的報價更高,因?yàn)榫W(wǎng)站將他們識別為老顧客,而不是匿名進(jìn)入或是從某個比價網(wǎng)站轉(zhuǎn)接進(jìn)來的顧客。亞馬遜聲稱這只是一項(xiàng)隨機(jī)的價格測試,其呈現(xiàn)出來的結(jié)果與老顧客身份之間的關(guān)聯(lián)純屬巧合。話是這樣說,它還是叫停了這項(xiàng)操作。
在商業(yè)規(guī)則下運(yùn)行
加在推薦算法之上的種種商業(yè)規(guī)則,旨在防止算法給出愚蠢的推薦,并幫助在線零售商在不失去你信任的前提下實(shí)現(xiàn)營業(yè)額的最大化。最起碼,推薦系統(tǒng)應(yīng)該避免人們說的超市悖論(Supermarket Paradox)。例如,差不多每個去超市的人都喜歡吃香蕉,也經(jīng)常會買一些。那么,推薦系統(tǒng)該不該向每一位顧客都推薦香蕉呢?答案是否定的——這樣做既幫不上顧客,也提高不了香蕉的銷量。所以,智能的超市推薦系統(tǒng)始終會包括有一條規(guī)則,明確地將香蕉排除在推薦結(jié)果之外。
這個例子可能聽起來沒什么,但在我們早期經(jīng)手的一個項(xiàng)目中,我們的推薦系統(tǒng)就曾經(jīng)向幾乎每一個到訪我們網(wǎng)站的人推薦披頭士的《白色專輯》(White Album)。從統(tǒng)計(jì)學(xué)的意義上講,這是個很棒的推薦:顧客此前都沒有從這個電子商務(wù)網(wǎng)點(diǎn)購買過這張專輯,而大多數(shù)顧客對《白色專輯》的評價都很高。盡管如此,這個推薦仍然是無效的——任何一個對《白色專輯》感興趣的人都已經(jīng)有了一張了。
當(dāng)然,大部分的推薦規(guī)則都是更加微妙的。比如說,當(dāng)約翰在 9 月份在 Netflix 索動作影片時,結(jié)果中不會出現(xiàn)《復(fù)仇者聯(lián)盟》(The Avengers),因?yàn)檫@部大片在當(dāng)時還沒有租借版,這樣的推薦結(jié)果不會讓 Netflix 有錢賺。因此,約翰被導(dǎo)向了《鋼鐵俠 2》(Iron Man 2),這部片已經(jīng)可以用流媒體播放了。
其他的規(guī)則還包括禁止推薦為招徠顧客而虧本銷售的商品(loss leader);反過來,鼓勵推薦滯銷品。在經(jīng)營Net Perceptions期間,我們就曾與一位客戶合作,他利用推薦系統(tǒng)來識別庫存積壓商品的潛在客戶,取得了相當(dāng)大的成功。
贏取你的信任
然而,這種事情很快就會變得棘手起來。一個只會推銷高利潤商品的推薦算法是不會贏得顧客的信任的。這就像是去餐館,那兒的服務(wù)生極力向你推薦某道魚一樣。這個魚真的是他覺得最好吃的嗎?還是大廚催著底下的人趕在魚變質(zhì)前把它給賣出去?
為了建立信任感,更復(fù)雜的推薦算法會盡力保持一定的透明度,讓顧客對系統(tǒng)為什么會向自己推薦這件商品有一個大致的概念,并且在不喜歡收到的推薦結(jié)果時,可以更改他們的個人資料。比如說,你可以刪除你在亞馬遜上買來送禮的購物記錄;畢竟,那些東西反映的不是你個人的喜好。你還可以知道系統(tǒng)為什么會向你推薦某些產(chǎn)品。當(dāng)亞馬遜為約翰挑選了 Jonathan Franzen 的小說《自由》之后,約翰點(diǎn)擊標(biāo)簽上的鏈接“為什么推薦給我?”。隨即顯示出一份簡要的說明,原來是他放在心愿單里的幾本書觸發(fā)了這一推薦。不過,由于他還沒有讀過心愿單上的那幾本書,約翰就不去管《自由》這個推薦結(jié)果了。像這樣的解釋說明會讓用戶明白推薦結(jié)果是否有用。
但是,完善個人資料和解釋推薦結(jié)果往往不足以保證系統(tǒng)不出錯。最近,亞馬遜用高清大屏幕電視機(jī)(HDTV)的促銷電子郵件對喬進(jìn)行了轟炸——每周 3 封,連續(xù)扔了一個月。除了給喬寄了過多的電子郵件,這家零售商還沒有意識到,喬已經(jīng)用他妻子的賬戶買了一臺電視機(jī)。此外,這些電子郵件并沒有提供一種很明顯的方法,讓喬可以說“謝謝,但我不感興趣”。最終,喬取消了他在亞馬遜的一些郵件訂閱;他并不在意收不到各種信息,而且他有了更多的時間來真的看他的電視。
推薦算法的作用究竟有多大?
那好,推薦算法究竟起了多大作用呢?它們當(dāng)然一直都在增加在線銷售額;據(jù)阿倫森集團(tuán)(Aaronson Group)的分析師杰克?阿倫森(Jack Aaronson)估計(jì),由于推薦算法帶動銷售額的增長,對推薦算法的投資能獲得 10%-30% 的收益。而且,它們還只是剛剛起步。現(xiàn)在,對我們這些研究推薦系統(tǒng)的人來說,最大的挑戰(zhàn)在于弄清楚如何去判斷新的方法和算法才最好。這可不像基準(zhǔn)化分析微處理器那么簡單,因?yàn)椴煌耐扑]系統(tǒng)有著非常不同的目標(biāo)。
評價一個算法最簡單的方法,是看它的預(yù)測和用戶的實(shí)際評價之間差異有多大。舉例來說,假如約翰給青春浪漫小說《暮光之城》(Twilight )一顆星,亞馬遜或許會注意到算法根據(jù)其他相似用戶的評價曾預(yù)計(jì)約翰會給兩顆星,也即出現(xiàn)了一顆星的偏差。但是,賣家更加關(guān)心算法在用戶評價高的商品上出的錯,因?yàn)楹迷u多的物品是顧客更有可能購買的;約翰反正也不會買《暮光之城》。所以,把這個評價計(jì)入考慮對理解推薦算法起了多大作用沒什么幫助。
另一個常見方法是看算法給出的推薦結(jié)果和顧客實(shí)際購買的商品,之間匹配度有多高。不過,這種方法也可能起到誤導(dǎo)作用,因?yàn)檫@樣分析會將用戶自己設(shè)法找到的商品錯誤地算在推薦算法的頭上,而用戶自己找得到東西恰恰是最不應(yīng)該被推薦的!鑒于這些方法的缺點(diǎn),研究人員一直在研究新的評判指標(biāo),不只看精度,也會關(guān)注像發(fā)現(xiàn)意外驚喜和多樣性等其他屬性。
發(fā)現(xiàn)意外驚喜(Serendipity)會加權(quán)不尋常的推薦結(jié)果,尤其是那些對某一個用戶極具價值,但對其他同類用戶而言沒什么用的推薦結(jié)果。調(diào)整為發(fā)現(xiàn)意外驚喜的算法會注意到《白色相簿》似乎是一個對幾乎每個人來說都不錯的推薦,因此會改為尋找一個不太常見的選擇——也許是 Joan Armatrading 的《愛和情感》。這個不那么熱門的推薦結(jié)果不太可能擊中目標(biāo),但一旦它遇上了,則將給用戶帶來一個大得多的驚喜。
看推薦結(jié)果的多樣性同樣也很能說明問題。比方說,一個超愛看 Dick Francis 神秘類小說的用戶,在看到推薦表單里全都是 Dick Francis 的作品時,仍有可能會感到失望。一個真正多樣化的推薦表單會包括不同作者和不同類型的書,還有電影、游戲和其他的產(chǎn)品。
推薦系統(tǒng)研究則需要突破各種各樣的阻礙,遠(yuǎn)不止是在現(xiàn)有的系統(tǒng)上進(jìn)行微調(diào)。研究者們眼下正在考慮的是,推薦算法應(yīng)該在怎樣一個程度上幫助用戶發(fā)掘一個網(wǎng)站的內(nèi)容集合中他們未曾了解的部分。比方說,把買書的人送去亞馬遜的服裝部門,而不是給一些安全的、顧客更有可能接受的推薦結(jié)果。在零售世界之外,推薦算法可以幫助人們接觸到新的想法;就算我們不同意其中的一些,但整體作用大概會是積極的,因?yàn)檫@將有助于減少社會的巴爾干化(Balkanization,即碎片化)。推薦算法能不能做到這一點(diǎn),還要不讓人感到厭煩或者不信任,仍需拭目以待。
但有一點(diǎn)是明確的:推薦系統(tǒng)只會變得越來越好,收集越來越多關(guān)于你的數(shù)據(jù),并在別的、意想不到的地方展示出來。如果你喜歡這篇文章,亞馬遜會很樂意向你推薦其他所有你可能會喜歡的關(guān)于推薦系統(tǒng)的書。
本文作者:@ ccyou ;來自:果殼
- 目前還沒評論,等你發(fā)揮!