【初階產(chǎn)品生存指南】產(chǎn)品經(jīng)理評(píng)估的那些事
產(chǎn)品經(jīng)理作為一個(gè)產(chǎn)品的最終負(fù)責(zé)人,需要把控整個(gè)產(chǎn)品的發(fā)展方向,并做出迭代過(guò)程中的決策。這個(gè)過(guò)程中,可能離不開(kāi)大量的評(píng)估工作。那么,評(píng)估方案如何設(shè)計(jì)?有哪些注意事項(xiàng)需了解?這篇文章里,作者做了梳理,一起來(lái)看。
一、我理解的評(píng)估
產(chǎn)品經(jīng)理的工作離不開(kāi)大量的評(píng)估。尤其是剛剛?cè)胄械男“桩a(chǎn)品經(jīng)理。
那么為什么產(chǎn)品經(jīng)理需要這么多的評(píng)估呢?我理解,產(chǎn)品經(jīng)理是一個(gè)產(chǎn)品的最終負(fù)責(zé)人,整個(gè)產(chǎn)品的發(fā)展方向,迭代過(guò)程中的決策,推動(dòng)產(chǎn)品迭代在大多數(shù)情況下是產(chǎn)品經(jīng)理的職責(zé)。如果沒(méi)有對(duì)整個(gè)產(chǎn)品的準(zhǔn)確把握,很難做出正確決策。同時(shí),當(dāng)所做的產(chǎn)品功能不被團(tuán)隊(duì)其他人理解時(shí),也不容易和其他人目標(biāo)達(dá)成一致,推動(dòng)產(chǎn)品的迭代。
在實(shí)際的評(píng)估工作中,我發(fā)現(xiàn),更多的評(píng)估是進(jìn)行數(shù)據(jù)評(píng)估。因?yàn)閿?shù)據(jù)是對(duì)產(chǎn)品現(xiàn)狀和存在問(wèn)題的定量化反映??梢愿珳?zhǔn)地把握產(chǎn)品目前的狀況。并且定量化的數(shù)據(jù)也更具有說(shuō)服力。
人對(duì)一個(gè)事物的認(rèn)知總是從感性認(rèn)識(shí)到理性認(rèn)識(shí),從現(xiàn)象到本質(zhì)。面對(duì)大量的,復(fù)雜的,甚至是有錯(cuò)誤的數(shù)據(jù)時(shí),如何通過(guò)評(píng)估掌握真實(shí)的產(chǎn)品情況呢?這就需要有科學(xué)的評(píng)估方案和評(píng)估指標(biāo)作為支持。
因此,可以這樣定義評(píng)估。
評(píng)估就是一種通過(guò)科學(xué)的評(píng)估方案和評(píng)估指標(biāo)找出產(chǎn)品存在的問(wèn)題、掌握產(chǎn)品發(fā)展現(xiàn)狀并與團(tuán)隊(duì)目標(biāo)達(dá)成一致,輔助產(chǎn)品決策的一種手段。
產(chǎn)品決策是什么呢?
產(chǎn)品決策就是決定做不做,做什么,什么時(shí)候做,如何做,做到什么程度的一個(gè)過(guò)程。這個(gè)過(guò)程是一個(gè)自上而下的過(guò)程,通過(guò)評(píng)估對(duì)象拆解出核心指標(biāo)。核心指標(biāo)需要從公司、產(chǎn)品自身和用戶角度去思考。同時(shí),也要綜合考慮影響面和成本大小。
通過(guò)以上論述可知,評(píng)估僅是產(chǎn)品決策的一部分,同時(shí)也是最重要的一部分。
二、評(píng)估方案設(shè)計(jì)
上文也有提到,評(píng)估在大多數(shù)情況下是對(duì)數(shù)據(jù)的評(píng)估。
數(shù)據(jù)是事實(shí)或觀察的結(jié)果,是對(duì)客觀事物的邏輯歸納,是用于表示客觀事物的未經(jīng)加工的原始素材。
數(shù)據(jù)夠真實(shí),能表示客觀事物,但是很蕪雜,甚至?xí)ㄒ恍└蓴_評(píng)估的臟數(shù)據(jù)。所以數(shù)據(jù)評(píng)估就是一個(gè)簡(jiǎn)化數(shù)據(jù)且不失真的過(guò)程。要想實(shí)現(xiàn)這個(gè)目標(biāo),就需要對(duì)評(píng)估方案進(jìn)行科學(xué)的設(shè)計(jì)。
評(píng)估方案是在理解產(chǎn)品業(yè)務(wù)和拆解出核心指標(biāo)的基礎(chǔ)上,系統(tǒng)性的評(píng)估。我在剛開(kāi)始做評(píng)估時(shí),經(jīng)常是上手就開(kāi)始做,做到一半,甚至快做完時(shí)發(fā)現(xiàn),我tm做錯(cuò)了,各種返工。因此,評(píng)估方案不提前設(shè)計(jì)好,就會(huì)有盲目行動(dòng),浪費(fèi)時(shí)間和資源的風(fēng)險(xiǎn)。做好評(píng)估方案是很有價(jià)值的,可以有效的降低風(fēng)險(xiǎn),提升評(píng)估效率,形成有效客觀的評(píng)估結(jié)論。
雖說(shuō)我后來(lái)慢慢認(rèn)識(shí)到了設(shè)計(jì)好評(píng)估方案的重要性,但是在實(shí)操過(guò)程中還是會(huì)犯一些錯(cuò)誤。比如:
過(guò)于主觀。在評(píng)估過(guò)程中,有意識(shí)無(wú)意識(shí)的就會(huì)把評(píng)估結(jié)論盡可能往自己想要的上靠。導(dǎo)致有些評(píng)估是失實(shí)的,不可靠的。
過(guò)于量化。這是在評(píng)估做了一段時(shí)間之后很容易犯的一個(gè)錯(cuò)誤,而且還不易察覺(jué)。有些東西是不適合或不易量化的,我在評(píng)估的時(shí)候遇到過(guò)一些比較偏主觀或感受的評(píng)估。結(jié)果給搞出一個(gè)奇形怪狀的指標(biāo)。
埋頭評(píng)估,自我感動(dòng)。做了一段時(shí)間,尤其是掌握了一定的評(píng)估技巧之后特別容易犯這個(gè)錯(cuò)誤。有了評(píng)估工作后,一頓操作。做的確實(shí)不錯(cuò),但是沒(méi)有考慮到產(chǎn)品、行業(yè)背景。我在評(píng)估一個(gè)數(shù)據(jù)時(shí)就是因?yàn)闆](méi)有考慮到目前行業(yè)中的現(xiàn)狀,把指標(biāo)定的離譜的高。
不進(jìn)行數(shù)據(jù)清洗。我記得我老大曾經(jīng)對(duì)我說(shuō)過(guò),做產(chǎn)品經(jīng)理要對(duì)任何結(jié)論都保持懷疑的態(tài)度。這一點(diǎn),我在剛剛做評(píng)估工作時(shí)做的很差。我以為自己的數(shù)據(jù)評(píng)估做的很好了。但是最終check評(píng)估結(jié)果時(shí)發(fā)現(xiàn),原始數(shù)據(jù)就是不準(zhǔn)確的,導(dǎo)致后續(xù)做的所有工作都是錯(cuò)的。
因此,評(píng)估方案要滿足客觀、科學(xué),準(zhǔn)確,定量與定性分析相結(jié)合的原則。
說(shuō)了這么多,評(píng)估方案要如何制定呢?
首先,確認(rèn)評(píng)估的時(shí)間周期。如多久要結(jié)果(ddl),有沒(méi)有關(guān)鍵時(shí)間節(jié)點(diǎn)。時(shí)間長(zhǎng)有時(shí)間長(zhǎng)的評(píng)法,時(shí)間短有時(shí)間短的評(píng)法。如果需要短時(shí)間給出部分結(jié)論,可以優(yōu)先評(píng)估一部分?jǐn)?shù)據(jù)。因此,確定評(píng)估的時(shí)間周期,可以更好的確定評(píng)估工作的整體優(yōu)先級(jí),評(píng)估的方式,評(píng)估的節(jié)奏,人力的投入等。
其次,確定指標(biāo)標(biāo)準(zhǔn)。關(guān)鍵指標(biāo)有哪些,衡量的基準(zhǔn)是怎樣的。比如,我在評(píng)估某項(xiàng)數(shù)據(jù)準(zhǔn)確率指標(biāo)時(shí),原有準(zhǔn)確率大概在70%左右,有了這個(gè)基準(zhǔn),我就可以做對(duì)比,來(lái)評(píng)估準(zhǔn)確率是提升了還是降低了。另外,指標(biāo)不可過(guò)多。一個(gè)方面一到兩個(gè)指標(biāo)即可。
再次,確定數(shù)據(jù)的收集和處理方法。是看后臺(tái)數(shù)據(jù)日志,還是問(wèn)卷調(diào)查?是用戶訪問(wèn)還是競(jìng)品分析?方法很多,要綜合評(píng)估時(shí)間要求、數(shù)據(jù)與指標(biāo)合適程度等因素進(jìn)行選擇。同時(shí),對(duì)數(shù)據(jù)的來(lái)源,數(shù)據(jù)的處理要做到準(zhǔn)確。這是評(píng)估的根基,它錯(cuò)了,所有的評(píng)估都會(huì)錯(cuò)。
最后,確定資源的安排。能有多少人投入?評(píng)估人員的熟練程度如何?收集方法是否非常耗費(fèi)人力?時(shí)間安排是怎么樣的?綜合考慮后,進(jìn)行安排,如果沒(méi)有人力就要向上匯報(bào),或申請(qǐng)人力投入,或申請(qǐng)延長(zhǎng)交付時(shí)間。
三、評(píng)估的標(biāo)準(zhǔn)
評(píng)估標(biāo)準(zhǔn)包括兩個(gè)方面。一是評(píng)估維度和指標(biāo)的確定。一個(gè)指標(biāo)的標(biāo)準(zhǔn)。
沒(méi)有一個(gè)評(píng)估是可以完全覆蓋到評(píng)估對(duì)象的所有維度的。所以評(píng)估的維度和指標(biāo)需要根據(jù)評(píng)估的目的去制定。
指標(biāo)的標(biāo)準(zhǔn)有兩方面。一個(gè)是外部標(biāo)準(zhǔn)。比如某個(gè)數(shù)據(jù)整個(gè)市場(chǎng)的大盤(pán)覆蓋只有50%。所以50%就是指標(biāo)的天花板,我們要看的就是和外部市場(chǎng)覆蓋的距離。第二個(gè)是內(nèi)部標(biāo)準(zhǔn)。它是產(chǎn)品團(tuán)負(fù)責(zé)隊(duì)制定的標(biāo)準(zhǔn)。還是上面的例子,可能因?yàn)槿肆ΓY源集中程度的問(wèn)題,我們能做到達(dá)到覆蓋30%就算是最優(yōu)的效果了。那我們?cè)u(píng)估時(shí),就要看我們目前和制定的內(nèi)部目標(biāo)距離是多少。
在制定的過(guò)程中可能會(huì)存在如下的問(wèn)題。
缺少某些評(píng)估維度。這可能是因?yàn)樵u(píng)估經(jīng)驗(yàn)較少導(dǎo)致的。比如,在評(píng)估某些數(shù)據(jù)質(zhì)量時(shí),搞出了很多的數(shù)據(jù)準(zhǔn)確率。如A項(xiàng)的準(zhǔn)確率,B項(xiàng)的準(zhǔn)確率,C項(xiàng)的準(zhǔn)確率。這些指標(biāo)僅僅是反應(yīng)了準(zhǔn)確率如何,并且也可以通過(guò)一個(gè)更高層級(jí)的總準(zhǔn)確率去評(píng)估。這些數(shù)據(jù)的覆蓋率如何呢?重復(fù)率呢?
所以,制定過(guò)程中建議先確定維度,后確定指標(biāo)。避免遺漏。為了避免遺漏,我覺(jué)得可以從一點(diǎn)兩面去梳理。一點(diǎn)是目的,所有維度的選取都要基于評(píng)估目的。兩面是行業(yè)或市場(chǎng)背景、評(píng)估對(duì)象自身。比如,評(píng)估一個(gè)UP主的視頻質(zhì)量。市場(chǎng)來(lái)說(shuō),可以對(duì)比其他平臺(tái)同類型視頻和UP主視頻的比較。視頻來(lái)說(shuō),可以考察視頻的質(zhì)量如何。
評(píng)估指標(biāo)過(guò)于單一,缺少行業(yè)特色指標(biāo)。這是因?yàn)槿鄙傧嚓P(guān)經(jīng)驗(yàn)和認(rèn)知導(dǎo)致的。比如就我了解的坪效來(lái)說(shuō),如果對(duì)商場(chǎng)缺乏認(rèn)知,在評(píng)估時(shí)很可能就會(huì)考慮不到這個(gè)指標(biāo)。相同的例子還有餐飲行業(yè)的上座率、開(kāi)臺(tái)率、翻臺(tái)率等。
評(píng)估指標(biāo)沒(méi)有優(yōu)先級(jí)。這要根據(jù)評(píng)估的目的進(jìn)行指標(biāo)的優(yōu)先級(jí)制定。有的時(shí)候指標(biāo)A可能會(huì)高于指標(biāo)B,有時(shí)可能因?yàn)槟康牡牟煌?,同樣的?shù)據(jù),指標(biāo)B高于指標(biāo)A。
評(píng)估指標(biāo)無(wú)意義。評(píng)估是為了決策,是為了傳遞產(chǎn)品優(yōu)劣信息的,因此指標(biāo)大多都是一個(gè)比較的結(jié)果。我在剛開(kāi)始做數(shù)據(jù)評(píng)估的時(shí)候把PV當(dāng)作一個(gè)指標(biāo),但是這個(gè)指標(biāo)的絕對(duì)數(shù)據(jù)代表了什么呢?還是要看它和過(guò)去相同時(shí)間周期相同時(shí)間點(diǎn)的PV的比較才能說(shuō)明優(yōu)劣。
所以,評(píng)估標(biāo)準(zhǔn)的路徑是,根據(jù)目標(biāo),先定性出維度,然后結(jié)合評(píng)估對(duì)象的行業(yè)或群體特性拆解出相應(yīng)指標(biāo),找到指標(biāo)標(biāo)準(zhǔn),進(jìn)行評(píng)估。
四、撰寫(xiě)評(píng)估報(bào)告
評(píng)估報(bào)告就是輸出完整客觀的報(bào)告文檔,圍繞結(jié)論展開(kāi)數(shù)據(jù)分析,呈現(xiàn)成果并推動(dòng)產(chǎn)品發(fā)展。
寫(xiě)評(píng)估報(bào)告最重要的是要有一個(gè)框架。一個(gè)完整的評(píng)估報(bào)告中要呈現(xiàn)的內(nèi)容包括標(biāo)題、評(píng)估計(jì)劃、評(píng)估標(biāo)準(zhǔn)、數(shù)據(jù)收集、數(shù)據(jù)分析+結(jié)論、綜合結(jié)論、未來(lái)計(jì)劃、附錄。
標(biāo)題最好統(tǒng)一格式?!驹u(píng)估報(bào)告】-xxx(項(xiàng)目或功能)關(guān)于xxx(維度)的評(píng)估報(bào)告。因?yàn)樵u(píng)估報(bào)告一般都是發(fā)郵件,前面有一個(gè)【評(píng)估報(bào)告】方便相關(guān)人員進(jìn)行郵件分類和后續(xù)查找。另外就是題目要傳達(dá)整份報(bào)告的內(nèi)容,所以要點(diǎn)明評(píng)估的對(duì)象和維度。
評(píng)估計(jì)劃、評(píng)估標(biāo)準(zhǔn)、數(shù)據(jù)收集是評(píng)估方法,這部分的展現(xiàn)要盡可能的簡(jiǎn)單,因?yàn)樗皇菆?bào)告中最重要的部分,但是卻要說(shuō)明的部分。所以要用簡(jiǎn)練的話語(yǔ)點(diǎn)出以上內(nèi)容。同時(shí),評(píng)估方法盡量簡(jiǎn)單易懂。
我認(rèn)為評(píng)估結(jié)論最重要的就是克制,千萬(wàn)別演繹,要遵循邏輯。有什么指標(biāo)就推導(dǎo)出什么結(jié)論,如果指標(biāo)無(wú)法推導(dǎo)出,就看能不能增加一些評(píng)估指標(biāo),而不是想當(dāng)然的下一個(gè)不合邏輯的結(jié)論。同時(shí),評(píng)估結(jié)論也要結(jié)構(gòu)清晰,重點(diǎn)突出,有助于決策判斷。能夠回答一些問(wèn)題,如是否問(wèn)題(是否好/壞)、價(jià)值問(wèn)題(A比B好,好多少)、取舍問(wèn)題(成本VS收益)。
對(duì)于新手來(lái)說(shuō)評(píng)估結(jié)論也比較容易犯一些錯(cuò)誤。
以數(shù)據(jù)代表結(jié)論。數(shù)據(jù)是結(jié)論的基礎(chǔ),但它不是結(jié)論本身,所以在最后呈現(xiàn)的時(shí)候要通過(guò)評(píng)估數(shù)據(jù)解讀出一個(gè)定性的描述。
數(shù)據(jù)堆積。需要選擇重要的關(guān)鍵性指標(biāo)進(jìn)行分析,得出有啟發(fā)的結(jié)論才有意義。
評(píng)估是為了決策,發(fā)一份報(bào)告絕不是評(píng)估的終點(diǎn)。認(rèn)識(shí)的發(fā)展也是從理性認(rèn)識(shí)到實(shí)踐的過(guò)程。報(bào)告是理性認(rèn)識(shí),制定TODO才完成了評(píng)估的閉環(huán)。制定TODO時(shí)要注意,要根據(jù)結(jié)論制定計(jì)劃,保持優(yōu)勢(shì),有優(yōu)先級(jí)的補(bǔ)齊劣勢(shì)。
最后的附錄會(huì)附上一些評(píng)估的原始數(shù)據(jù),數(shù)據(jù)來(lái)源等不需要呈現(xiàn)但可能會(huì)被報(bào)告閱讀人關(guān)注的事情。
五、評(píng)估注意事項(xiàng)
評(píng)估過(guò)程中,要秉承以下評(píng)估態(tài)度:
避免盲目、聚焦核心目標(biāo)、直接敏感性、客觀科學(xué)、不摻雜主觀情感。
在實(shí)際評(píng)估工作中我一直在找尋一些提高效率和準(zhǔn)確的方法。
就數(shù)據(jù)獲取來(lái)說(shuō),有的時(shí)候我想要一份數(shù)據(jù)需要開(kāi)發(fā)同學(xué)各種跑數(shù)據(jù)。但是開(kāi)發(fā)同學(xué)手頭也有很多的項(xiàng)目在跟。這時(shí)如果自己會(huì)寫(xiě)sql語(yǔ)句,就可以自己去看數(shù)據(jù)了,無(wú)須開(kāi)發(fā)同學(xué)排期跑數(shù)據(jù)。節(jié)省很多開(kāi)發(fā)成本和溝通成本。
就數(shù)據(jù)分析來(lái)說(shuō),要善于使用excel中的公式,比如VLOOKUP公式,IF公式等,多借用關(guān)聯(lián)關(guān)系和演算邏輯。還有在處理量比較大的數(shù)據(jù)時(shí),excel可能跑不動(dòng),如果能使用python處理較大量級(jí)數(shù)據(jù)就會(huì)大大提高效率。
就報(bào)告來(lái)說(shuō),總結(jié)出一份自己的報(bào)告模板也會(huì)大大提高效率。
在保障準(zhǔn)確性上,要注意以下幾點(diǎn):
一定要對(duì)原始數(shù)據(jù)進(jìn)行清洗,剔除臟數(shù)據(jù)。
盡可能減少數(shù)據(jù)流轉(zhuǎn)的路徑,盡可能用一份數(shù)據(jù)或放在一個(gè)表里分析。
統(tǒng)一整體評(píng)估標(biāo)準(zhǔn),嚴(yán)格遵循邏輯。
同時(shí)減少手算,多用公式計(jì)算。可有效提高準(zhǔn)確性。
最后,回到評(píng)估的定義。評(píng)估是一種輔助決策的手段。因此,一切都要為決策服務(wù)。上文提到的是一個(gè)全面評(píng)估所需要做到的方方面面,在實(shí)際評(píng)估工作中很難全涉及到。所以在評(píng)估時(shí),不可僵化,生搬硬套。
要想提高評(píng)估水平我認(rèn)為就兩個(gè)方式,多實(shí)踐、多總結(jié)、多看優(yōu)秀評(píng)估報(bào)告。
參考:
- 公司內(nèi)部培訓(xùn)
- 工作實(shí)踐總結(jié)
本文由 @孟老濕 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉(zhuǎn)載
題圖來(lái)自Unsplash,基于CC0協(xié)議
該文觀點(diǎn)僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺(tái)僅提供信息存儲(chǔ)空間服務(wù)。
學(xué)習(xí)了
感謝認(rèn)可