14年接觸到“指標(biāo)體系”這個(gè)詞，一臉懵逼，當(dāng)時(shí)還停留在離散的報(bào)表需求階段，不能明確說(shuō)出什么就是指標(biāo)體系。發(fā)展到現(xiàn)在，做了幾個(gè)產(chǎn)品的數(shù)據(jù)工作，對(duì)指標(biāo)體系概念以及規(guī)劃方法有一定的積累，總結(jié)出來(lái)作為知識(shí)儲(chǔ)備。

What is指標(biāo)體系

百度百科的專業(yè)定義“評(píng)價(jià)指標(biāo)體系是指由表征評(píng)價(jià)對(duì)象各方面特性及其相互聯(lián)系的多個(gè)指標(biāo)，所構(gòu)成的具有內(nèi)在結(jié)構(gòu)的有機(jī)整體?！焙?jiǎn)單來(lái)說(shuō)，就是將統(tǒng)計(jì)指標(biāo)系統(tǒng)性的組織起來(lái)。指標(biāo)體系是由指標(biāo)和體系兩部分組成。指標(biāo)主要包括：用戶數(shù)、次數(shù)、人均次數(shù)、時(shí)長(zhǎng)、點(diǎn)擊率、轉(zhuǎn)換率、滲透率、留存率、成功率等；體系是由不同的維度組成，而維度是指人們觀察、思考與表述某事物的“思維角度”，比如：區(qū)分不同模塊來(lái)看用戶數(shù)，這個(gè)模塊就是維度。維度是指標(biāo)體系的核心，沒(méi)有維度，單純說(shuō)指標(biāo)是沒(méi)有任何意義的。根據(jù)產(chǎn)品灰度和上線的節(jié)奏來(lái)規(guī)劃指標(biāo)體系，如下圖指標(biāo)體系框架。

Why 指標(biāo)體系

在沒(méi)有指標(biāo)體系的情況下，產(chǎn)品看數(shù)據(jù)遇到很多問(wèn)題，這些問(wèn)題都可以通過(guò)指標(biāo)體系來(lái)解決：

How to規(guī)劃指標(biāo)體系

前期重要準(zhǔn)備工作：不斷體驗(yàn)產(chǎn)品，熟知產(chǎn)品的基本功能，明確產(chǎn)品的KPI目標(biāo)和戰(zhàn)略重點(diǎn)。按照以下三個(gè)步驟來(lái)規(guī)劃整個(gè)指標(biāo)體系：

其中“確認(rèn)指標(biāo)和目標(biāo)是否匹配”也就是確認(rèn)指標(biāo)能否100%反映評(píng)估目標(biāo)的變化，如果不完全匹配，則需要反過(guò)來(lái)修正評(píng)估指標(biāo)，使其完全匹配；下面重點(diǎn)從產(chǎn)品規(guī)模質(zhì)量、健康度、用戶屬性等6個(gè)方面來(lái)介紹如何“設(shè)計(jì)合適的評(píng)估指標(biāo)”：

產(chǎn)品規(guī)模和質(zhì)量

1、整體規(guī)模和實(shí)時(shí)數(shù)據(jù)監(jiān)控

整體概況：依賴產(chǎn)品的核心功能以及KPI目標(biāo)來(lái)制定，是對(duì)產(chǎn)品整體的監(jiān)控，后面所有的指標(biāo)均依賴此項(xiàng)展開(kāi)。

關(guān)鍵漏斗：對(duì)關(guān)鍵概況指標(biāo)做模塊或者路徑上的拆分。

實(shí)時(shí)數(shù)據(jù)監(jiān)控：從整體概況中抽取最關(guān)鍵的1~2個(gè)指標(biāo)來(lái)做按小時(shí)、按分鐘監(jiān)控。主要作用：在新版本發(fā)布后監(jiān)控核心指標(biāo)變化，便于及時(shí)發(fā)現(xiàn)版本問(wèn)題回滾；某類重要活動(dòng)上線之后的實(shí)時(shí)效果監(jiān)控。之所以選擇1~2個(gè)指標(biāo)，是因?yàn)閷?shí)時(shí)數(shù)據(jù)的統(tǒng)計(jì)對(duì)計(jì)算資源要求很高，通常選擇最關(guān)鍵的指標(biāo)來(lái)做監(jiān)控，其他指標(biāo)按天監(jiān)控即可。

2、產(chǎn)品質(zhì)量

這部分內(nèi)容是從14年開(kāi)始逐漸被產(chǎn)品重視起來(lái)，發(fā)現(xiàn)產(chǎn)品質(zhì)量本身也會(huì)嚴(yán)重影響用戶體驗(yàn)，質(zhì)量差的產(chǎn)品容易被卸載/取關(guān)。質(zhì)量監(jiān)控是由各種成功率組成，基礎(chǔ)指標(biāo)包括：crash率、啟動(dòng)耗時(shí)、頁(yè)面加載速度等，這些是每個(gè)產(chǎn)品必備的，另外根據(jù)產(chǎn)品功能會(huì)有其他成功率指標(biāo)，如直播產(chǎn)品會(huì)有播放成功率、直播加載速度等；產(chǎn)品質(zhì)量與用戶自身的網(wǎng)絡(luò)類型、運(yùn)營(yíng)商、機(jī)型強(qiáng)相關(guān)，所以以上指標(biāo)的維度通常需要細(xì)分這三個(gè)維度來(lái)看。

用戶健康度

1、留存和活躍度

通過(guò)留存率、活躍度(活躍天數(shù)/次數(shù)等分布)來(lái)監(jiān)控產(chǎn)品的健康度，不同產(chǎn)品的監(jiān)控周期不同，對(duì)于高頻產(chǎn)品，留存率監(jiān)控次留、3留、7留，活躍度按周來(lái)監(jiān)控，如果按月來(lái)監(jiān)控，當(dāng)發(fā)現(xiàn)指標(biāo)下降的時(shí)候用戶已經(jīng)流失了，錯(cuò)過(guò)了最佳挽留時(shí)機(jī)；對(duì)于低頻產(chǎn)品，按月監(jiān)控即可；可通過(guò)看用戶的周活躍天數(shù)來(lái)判斷該產(chǎn)品是高頻還是低頻，通常周活躍天數(shù)大于3，是高頻產(chǎn)品，反之屬低頻產(chǎn)品。

2、成長(zhǎng)體系

這部分內(nèi)容僅適用于有增值包月功能的業(yè)務(wù)。包括vip到期天數(shù)分布、vip等級(jí)分布、特權(quán)使用度以及年費(fèi)相關(guān)；

3、用戶流動(dòng)模型

結(jié)合用戶生命周期，從新增、留存、回流、流失的角色轉(zhuǎn)化來(lái)定義用戶在產(chǎn)品中的流動(dòng)，稱之為流動(dòng)模型；

當(dāng)產(chǎn)品運(yùn)營(yíng)到一定的規(guī)模，必然要做精細(xì)化運(yùn)營(yíng)，即用戶生命周期管理(CLM)，基于用戶當(dāng)前的行為狀態(tài)，通過(guò)各類預(yù)測(cè)模型，對(duì)其進(jìn)行精細(xì)化運(yùn)營(yíng)，來(lái)拉長(zhǎng)用戶生命周期。

渠道質(zhì)量

這部分內(nèi)容僅適用于獨(dú)立app產(chǎn)品，因?yàn)楠?dú)立app需要通過(guò)不同渠道去推廣引導(dǎo)用戶下載安裝，不同渠道的用戶質(zhì)量差異比較大，所以需要分渠道來(lái)監(jiān)控；平臺(tái)資源產(chǎn)品不需要關(guān)注這塊，如：手Q動(dòng)態(tài)里面的平臺(tái)資源產(chǎn)品。

監(jiān)控方式主要是在上面講到的概況和留存指標(biāo)上擴(kuò)展渠道維度。

資源觸達(dá)

梳理清楚產(chǎn)品的資源位，每個(gè)資源位的評(píng)價(jià)指標(biāo)類似，即活動(dòng)效果評(píng)估，包含兩部分：

a）活動(dòng)自身的pv、uv和點(diǎn)擊率，以及渠道側(cè)的發(fā)送、到達(dá)、點(diǎn)擊整個(gè)鏈條數(shù)據(jù)；

b）活動(dòng)給產(chǎn)品帶來(lái)的價(jià)值，從新增、回流、留存上來(lái)評(píng)估;

用戶屬性

畫(huà)像和終端數(shù)據(jù)是用來(lái)詳細(xì)描述用戶本身的屬性，明確使用產(chǎn)品的用戶是什么樣的人群，一方面可以指導(dǎo)產(chǎn)品的設(shè)計(jì)方向，如：產(chǎn)品設(shè)計(jì)的目標(biāo)是針對(duì)25歲以上的成熟用戶，但實(shí)際畫(huà)像出來(lái)發(fā)現(xiàn)用戶年齡主要集中在20歲以下，與設(shè)計(jì)理念不符，就得考慮功能設(shè)計(jì)是不是有問(wèn)題，得改變方向；另一方面可以作為精細(xì)化推薦重要特征。畫(huà)像的重要性不言而喻，但目前只有社交產(chǎn)品在這塊建設(shè)相對(duì)完善；終端信息通過(guò)系統(tǒng)接口均可以獲取到。

競(jìng)品數(shù)據(jù)

沒(méi)有競(jìng)爭(zhēng)就沒(méi)有前進(jìn)的動(dòng)力。尋找自己的假想敵，對(duì)標(biāo)規(guī)模和留存指標(biāo)，以便評(píng)估產(chǎn)品的優(yōu)勢(shì)和劣勢(shì)，不過(guò)這部分?jǐn)?shù)據(jù)通常不易獲取到。

規(guī)劃完成后必須用以下四個(gè)準(zhǔn)則來(lái)檢驗(yàn)指標(biāo)體系的合理性：

1、完備性：通過(guò)指標(biāo)體系能夠?qū)Ξa(chǎn)品的經(jīng)營(yíng)狀況一目了然；比如產(chǎn)品現(xiàn)在增速如何，現(xiàn)狀是否健康等；

2、系統(tǒng)性：通過(guò)指標(biāo)體系能夠粗略定位到數(shù)據(jù)波動(dòng)的原因；比如活躍用戶下降，通過(guò)指標(biāo)體系能夠拆解到大概原因；

3、可執(zhí)行性：指標(biāo)體系是可量化并實(shí)現(xiàn)的；

4、可解釋性：所有指標(biāo)的統(tǒng)計(jì)邏輯都是可解釋的，容易被用戶理解的；經(jīng)驗(yàn)證明那些復(fù)雜不可解釋的指標(biāo)最終都會(huì)被淘汰；

Just do it指標(biāo)體系可視化

在指標(biāo)體系可視化過(guò)程中有幾點(diǎn)需求注意：

1、數(shù)據(jù)上報(bào)環(huán)節(jié)要保證準(zhǔn)確性和擴(kuò)展性強(qiáng)。數(shù)據(jù)上報(bào)不準(zhǔn)確，后面的鏈條做的再好都是無(wú)用功，需要開(kāi)發(fā)和測(cè)試多方驗(yàn)證保證上報(bào)準(zhǔn)確性；擴(kuò)展性強(qiáng)是為了產(chǎn)品擴(kuò)展功能的時(shí)候數(shù)據(jù)上報(bào)框架依舊可用，只需增加某些id即可。另外盡可能把用戶的所有操作都做上報(bào)，包括操作成功和失敗。

2、計(jì)算框架最好能夠包括中間表建設(shè)。一方面使的指標(biāo)計(jì)算邏輯很清晰，且由于中間表的復(fù)用性很強(qiáng)，指標(biāo)計(jì)算可以節(jié)省大量計(jì)算資源；另一方面在后續(xù)問(wèn)題分析過(guò)程中，使用中間表要比直接從原始流水簡(jiǎn)單很多。

End

以上所列指標(biāo)體系方法論適用于大部分產(chǎn)品，具有普適性，大家可以仿照上面的流程建立相對(duì)完善的指標(biāo)體系；但部分產(chǎn)品由于功能相對(duì)個(gè)性化，無(wú)法抽象出來(lái)，需要在運(yùn)營(yíng)過(guò)程中逐步完善指標(biāo)體系。