策略型PM如何在完整的產(chǎn)品循環(huán)中發(fā)揮作用?

0 評論 4921 瀏覽 26 收藏 16 分鐘

本文筆者將分別從產(chǎn)品循環(huán)的每個環(huán)節(jié)入手,闡述策略型pm在完整產(chǎn)品循環(huán)中的工作方法和應發(fā)揮的作用。

一、發(fā)現(xiàn)問題

發(fā)現(xiàn)問題通常有以下三種方法:

1. 線上效果評估

線上效果評估,最常見的方式是:利用隨機查詢集合,逐個在線上檢索查看質(zhì)量。

若為了更快更明顯的看到問題,通常會和競品進行比較。很多時候,競品的做法或效果,未必是最好,為了從理想角度探究效果,我們也采用以理想為標桿的對比和發(fā)現(xiàn)問題。

這種方式的好處是:全面發(fā)現(xiàn)問題、問題影響面客觀、容易量化,例行開展還可以進行歷史數(shù)據(jù)比較,觀察產(chǎn)品的變化情況;而問題是,線上整體效果越好,發(fā)現(xiàn)問題需要花費的力氣就越大——即發(fā)現(xiàn)問題的效率非最高。

在以評估為手段的問題發(fā)現(xiàn)中,pm需要清楚把握用戶需求,根據(jù)線上實際效果,對用戶的滿足狀態(tài)給出判斷,需要給出每次查詢用戶面臨什么樣的問題,以及嚴重程度。

2. 線上監(jiān)控

在網(wǎng)頁搜索技術(shù)分支增加、策略日漸復雜的趨勢下,人工去排查系統(tǒng)每個模塊給用戶帶來的影響,是一種非常不經(jīng)濟的方式。線上監(jiān)控作為一種自動、實時、針對效果的問題 發(fā)現(xiàn)方法,日趨重要。

其中,自動是指利用機器去執(zhí)行;實時,是可以持續(xù)不斷地對效果進行監(jiān)控,且能在問題產(chǎn)生第一時間獲知。自動和實時,都大大減少了人力成本。

針對效果是指:針對實 際用戶感受(或影響因素)進行監(jiān)控。

監(jiān)控的問題是:精度有限,特別是針對網(wǎng)頁搜索效果的監(jiān)控精度,提升過程比較緩慢。所以,目前的監(jiān)控,還比較多的停留在一些相對粗粒度的統(tǒng)計指標。如:autorank、位置點擊率、結(jié)果/站點展現(xiàn)、站點導流情況等。

也正因為精度有限,監(jiān)控往往難以直接定位問題,而是和其他人工手段配合確定最后的問題。

pm在監(jiān)控工作中的職責,主要體現(xiàn)在:將“用戶感受”的每個影響要素進行拆解,并找到相對獨立的、可機器量化的指標,這些指標往往就是監(jiān)控點。

比如:建立衡量線上檢索效果的autorank監(jiān)控,pm首先要清楚,結(jié)果好壞會在哪些方面體現(xiàn)——比如結(jié)果相關(guān)度權(quán)重、資源質(zhì)量、用戶搜索/停留/點擊行為等等。

接下來,結(jié)果的相關(guān)度權(quán)重、資源質(zhì)量判斷,準確性依賴現(xiàn)有策略,策略效果會直接影響監(jiān)控的有效性,所以效果監(jiān)控不適合將以上兩點作為監(jiān)控指標或主要監(jiān)控指標。而用戶行為這個指標相對獨立,受擾動因素較小,所以合適作為監(jiān)控指標,這也是前面強調(diào)獨立的原因。

3. 平時產(chǎn)品使用中發(fā)現(xiàn)的badcase

——即我們平時說的報case。

這個方法發(fā)現(xiàn)的問題,來源于平時的個人使用中遇到的體驗較差或不合預期的查詢。在過去很長一段時間內(nèi),case驅(qū)動成為網(wǎng)頁搜索改進的重要途徑。

這種方法發(fā)現(xiàn)問題,有個明顯的缺陷——即隨機,發(fā)現(xiàn)問題難以全面,且難以量化,難以得出問題在線上的整體影響面。但是,對每一個問題的深入分析,可能幫我們發(fā)現(xiàn)用戶體驗上的明顯問題,或找到系統(tǒng)中的嚴重癥結(jié)。

涉及分析的內(nèi)容,會在下文展開。

以上,是發(fā)現(xiàn)問題的三個主要方法,作為pm產(chǎn)品工作的第一步,掌握發(fā)現(xiàn)問題的方法,保證不偏不漏,這是非常重要的。

二、提出、描述問題

把問題描述清楚,需要做好兩方面:一個是對問題的衡量,一個是問題的解決預期。

1. 問題的衡量

首先,問題的衡量需包括:

問題的廣度:指問題產(chǎn)生了多大范圍的影響,在網(wǎng)頁搜索,這個范圍影響,通常用收到影響的查詢占比來反映。

問題的深度:即該問題對用戶體驗造成傷害的程度。

這個點上,不太容易有量化的衡量,但對嚴重問題的判斷,仍有一些原則可以遵循。如:很多用戶每天通過aladdin結(jié)果來獲取股票信息,而突然某一天,股票aladdin結(jié)果消失,這個就破壞了用戶穩(wěn)定的預期。

再如:搜“新浪”,出“搜狐”結(jié)果,也難以讓人接受,這是因為超出了用戶的理解范圍;而在某些spam問題上,破窗效應導致對用戶體驗威脅加重趨勢明顯,也應算在嚴重問題范疇內(nèi)。

2. 明確解決預期

其次,明確解決預期,也需要基于兩點:

1)理想情況的描繪

提出問題只是第一步,這個問題上要做到什么效果——即目標是什么,也需要pm有清楚的判斷。只知道問題而不知道效果目標,工作無法有效開展。

2)理想情況是一回事,能否達到是另外一回事。

因為理想情況的實現(xiàn)會受到很多因素的限制。有不低比例的查詢,因為話題過于冷僻,互聯(lián)網(wǎng)幾乎不存在與之匹配的資源。

在資源到位之前,一味的要求相關(guān)性提升是不合適的,這樣很容易造成rd(特別是沒經(jīng)驗的rd)辛苦開發(fā)了很久,卻對效果沒有幫助。而目標調(diào)整為,保證有資源的查詢效果提升或至少要召回google能召回的好資源,這樣就合理很多。

在實際工作中,我們往往對問題衡量做的較好,而對解決預期重視不夠,這就是為什么有些pm覺得做完評估或調(diào)研工作就結(jié)束了,或者覺得自己難以給出優(yōu)先級判斷。缺乏對問題解決的合理預期,會導致pm難以進行后面的工作,無法形成完整產(chǎn)品循環(huán),還會導致rd對需求/目標的理解有偏,資源投入和實際產(chǎn)出不匹配。

三、判斷決策

1. 兩個問題

方向或策略定位問題和目標清楚之后,pm還應主導回答兩個問題:該策略/方向定位是什么,解決什么問題? 該策略/方向不解決哪些問題(或什么情況下不必發(fā)揮作用)?

第一個問題想必很多pm都是可以回答的,而主動思考第二個問題的人卻并不多。缺乏對第二個問題的思考,會導致pm對策略/方向的認識不完整,以及在后續(xù)執(zhí)行過程中,偏離目標、工作開展失控。

舉兩個例子:

第一,地域擴展策略。

要解決的問題是:同一查搜索詞下,不同地區(qū)用戶的目標結(jié)果不一致的問題,如“招商銀行網(wǎng)點”。根據(jù)該問題表象,可以提煉出對搜索結(jié)果有本地域需求的查詢。

其解決思路是:在這類查詢下,基于用戶地理位置信息,插入與用戶地域匹配的結(jié)果。在這個定位下,“北京招商銀行”,也是地域擴展策略的目標查詢了。

如果再補充一個問題,地域擴展策略不影響什么樣的查詢,在一定量的query標注后就會發(fā)現(xiàn):“北京招商銀行”這樣的查詢,意圖非常清楚,和用戶所在地域沒有關(guān)系,沒有必要進行地域結(jié)果擴展。這個時候,我們可以及時對地域擴展策略的定位進行“修訂”——即對有潛在本地需求的查詢,提供地域差異性結(jié)果。

第二個例子:檢索擴展提示。

改功能其中一個定位,是當用戶輸入存在非常用寫法或錯別字的時候,給予提示,使得用戶避免query改寫操作,找到更理想的資源。

如果沒有“不做什么”約束,檢索擴展就很有可能出現(xiàn)這樣的問題:

例如:

query“諜中諜4” ,檢索擴展提示:“您要找的是不是:碟中諜4 ,搜索結(jié)果頁地址?!?/p>

該query命中非常用寫法的條件,但是結(jié)果非常好,不影響用戶找到所需資源,此刻提示的價值就非常小了, 且這種提示的價值,相比對用戶注意力的干擾不值一提。

基于這類case,檢索擴展的這個定位可以完善成“是當用戶輸入存在非常用寫法或錯別字導致結(jié)果不佳的時候,給以提示,以使用戶避免query改寫操作,找到更理想的資源。”

補充一句:“不做什么”這個問題的答案,有可能依賴pm產(chǎn)品經(jīng)驗或良好的用戶感覺判斷,對于一些新人,也可以通過一定量的數(shù)據(jù)分析找到。

綜上,弄清兩個問題,明確策略/方向定位,背后是這樣的產(chǎn)品決策原則:任何問題的改進,都應明確在一定的范圍內(nèi),不應對問題范圍外的點所有不必要影響。而這兩個問題的答案,需要在項目啟動前明確,并向rd進行清晰傳達。

2. 優(yōu)先級

優(yōu)先級的判斷,一般項目來說,比較性價比是比較有效的辦法。在問題或需求描述的環(huán)節(jié),pm應該就改進空間給出說明,同時rd會給出解決方案需要的代價。

這里的收益空間不僅僅是影響廣度,很多問題的影響面非常小,但是對用戶或?qū)ι鷳B(tài)產(chǎn)生持續(xù)(或深刻)消極影響,且這種消極影響會以難以控制的速度擴散,spam就是典型的例子。

還有一些情況,需要做短長期的權(quán)衡,比如:一些符合趨勢的改變,即便現(xiàn)在的面很小,也應該酌情提升優(yōu)先級,以避免將來應對不夠及時。

3. 方案的風險判斷

策略型pm最容易看到的是效果上的的風險,除此之外,用戶習慣和感知、系統(tǒng)復雜性、隨著時間推移的可擴展性,也應在考慮范圍內(nèi)。

舉一個感知風險的例子:我們系統(tǒng)中有很多需求改寫策略,這些策略的原理,是通過挖掘用戶行為或語料,得到一些query之間的信息。在用戶搜索時,在結(jié)果中插入相關(guān)query的結(jié)果(如同義詞結(jié)果),來召回更多相關(guān)結(jié)果。

在query與資源的相關(guān)性判斷中,可能不會有什么問題,但是在結(jié)果摘要展現(xiàn)時,若同義詞和用戶輸入query在字面上相差較多,會有不飄紅的情況,第一眼看上去非常突兀,這會導致用戶在看到結(jié)果時,付出較多的反應成本。

而系統(tǒng)復雜性和未來的擴展性,雖然pm無法直接回答這些問題,但是需要通過提醒和追問的方式,讓rd去進行相應的思考。

4. 階段性效果衡量

在提需求的時候,我們已經(jīng)描述理想狀態(tài)了,但是在實際開發(fā)過程中,由于技術(shù)上或數(shù)據(jù)上的種種原因,很難一次性做到完美,針對階段性工作,pm需要給出衡量方式。而衡量的途徑,就是制定標準,給出不同程度的效果的定義,在這個基礎(chǔ)上量化工作效果。

四、推進落實

策略型pm在這個環(huán)節(jié)事情相對簡單,主要是保證關(guān)鍵時間點確認,及時和rd了解困難,從用戶角度提出一些思路建議,必要時,積極爭取資源解決困難。當項目進行中發(fā)現(xiàn)目標需要調(diào)整時,pm需要及時組織溝通,重新制定目標和衡量方法,讓參與同事達成一致,并形成正式通告。

對于項目中增加新成員或負責人轉(zhuǎn)手的情況,pm也需要推動或落實背景和目標的傳達,確保項目執(zhí)行中沒有偏差。

五、效果確認

這個環(huán)節(jié)主要是確認效果和風險,評估標準應與前面按目標制定的評估標準一致,此環(huán)節(jié)的工作會決定策略上線或進一步迭代。同時,對于影響面大的策略,最好再次review風險

六、開始下一次循環(huán)

每一次改進的上線,形式上會讓人覺得事情做完了。但是,除了問題修復類型的工作外,對于一些持續(xù)改進的方向,還需要事后的監(jiān)控機制。

這個不僅是對項目上線后線上效果的再摸底,也能使得pm對該類問題能夠做到長期心中有數(shù),且持續(xù)的監(jiān)控,也是保證問題及時發(fā)現(xiàn)不遺漏的方法,參見第一環(huán)節(jié)。

七、其他

負責一個產(chǎn)品的pm,要清楚把握一個產(chǎn)品不同的發(fā)展階段——即產(chǎn)品周期。

同樣地,策略型pm,也應該清楚每個策略的發(fā)展周期,包括:策略目前在線上發(fā)揮什么樣的作用?是否要做進一步的深化或擴展?外界變化或內(nèi)部其他替代性策略/功能的上線會對策略的貢獻有什么樣的影響?這個策略接下來應做如何調(diào)整,改進升級,或是收斂投入,甚至下線?

 

本文由@剛剛好 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理,未經(jīng)許可,禁止轉(zhuǎn)載。

題圖來自Unspalsh, 基于CC0協(xié)議。

更多精彩內(nèi)容,請關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號或下載App
評論
評論請登錄
  1. 目前還沒評論,等你發(fā)揮!