指標(biāo)是一種強大的工具;它們可以幫助您衡量自己關(guān)心的事情。擁有遠大的目標(biāo)是件好事,但要知道自己是否取得了進步、激勵團隊并建立責(zé)任感,您需要能夠用數(shù)字來表達它們。
但說起來容易做起來難。有幾十種指標(biāo)似乎在衡量同一件事,而且每天都有新的流行指標(biāo)出現(xiàn)。你應(yīng)該使用哪些指標(biāo),又應(yīng)該不惜一切代價避免哪些指標(biāo)?
在過去十年中,我一直生活在指標(biāo)之中,并發(fā)現(xiàn)有一些區(qū)分好指標(biāo)和壞指標(biāo)的一般原則:
原則 1:指標(biāo)應(yīng)該是你想要衡量的指標(biāo)
通常,您無法直接測量您關(guān)心的確切事物。
假設(shè)我的目標(biāo)是衡量我的新聞通訊帖子的質(zhì)量;我該怎么做呢?“質(zhì)量”是主觀的,沒有普遍接受的公式來評估它。因此,我必須為我的目標(biāo)選擇我實際上能夠衡量的最佳(或最不壞)代理。在這個例子中,我可以使用打開率、喜歡等作為質(zhì)量的代理。
這與人們通常所說的指標(biāo)“相關(guān)性”密切相關(guān):如果改進指標(biāo),是否會為企業(yè)創(chuàng)造價值?如果沒有,那為什么要衡量它?
例如,假設(shè)您在 Uber 工作,想了解您的供應(yīng)方是否健康。您可能會認(rèn)為平臺上的司機數(shù)量或他們在應(yīng)用程序上花費的在線時間是一個很好的衡量標(biāo)準(zhǔn)。
這些指標(biāo)并不糟糕,但它們并不能真正告訴你你的供應(yīng)方是否真的健康(即足以滿足需求)??赡苁切枨蟪^了驅(qū)動力的增長,或者大部分需求增長發(fā)生在上午,但供應(yīng)增長主要發(fā)生在下午。
更好的指標(biāo)是將供給和需求結(jié)合起來;例如乘客打開應(yīng)用程序而沒有可用司機的次數(shù)。
原則 2:指標(biāo)應(yīng)易于計算和理解
人們喜歡花哨的指標(biāo);畢竟,你付錢給數(shù)據(jù)團隊就是為了做復(fù)雜的分析,對吧?但復(fù)雜的指標(biāo)很危險,原因如下:
它們很難理解。如果你不確切了解某個指標(biāo)是如何計算的,你就不知道如何解釋其變動或如何影響它。
他們強制進行集中分析。通常,數(shù)據(jù)科學(xué)是唯一能夠計算復(fù)雜指標(biāo)的團隊。這剝奪了其他團隊進行分散分析的能力。
它們?nèi)菀壮鲥e。復(fù)雜的指標(biāo)通常需要多個團隊的輸入;我已經(jīng)記不清有多少次因為眾多上游輸入中的一個被破壞而發(fā)現(xiàn)錯誤了。更糟糕的是,由于公司中只有少數(shù)人可以計算這些指標(biāo),因此同行評審很少,錯誤往往在很長一段時間內(nèi)都未被發(fā)現(xiàn)。
它們通常涉及預(yù)測。許多復(fù)雜的指標(biāo)都依賴于預(yù)測(例如,根據(jù)過去的數(shù)據(jù)預(yù)測群組表現(xiàn))。這些預(yù)測通常不準(zhǔn)確,并且會隨著新數(shù)據(jù)的輸入而隨時間而變化,從而造成混亂。
以 LTV:CAC 為例:
除了它不是最適合其工作方式的指標(biāo)之外,它也很危險,因為計算起來很復(fù)雜。分子 CAC 要求你按群組匯總營銷和銷售部門的各種成本,而分母 LTV 則是對各種因素的預(yù)測,包括留存率、追加銷售等。
這些指標(biāo)就是當(dāng)你在兩年后才意識到方法論上存在問題并且你一直在查看“錯誤”的數(shù)據(jù)。
原則 3:良好的(操作性)指標(biāo)應(yīng)具有響應(yīng)性
如果您想持續(xù)管理業(yè)務(wù)以達到指標(biāo),則需要具有響應(yīng)能力。如果指標(biāo)滯后,即變化需要數(shù)周或數(shù)月才能影響指標(biāo),那么您將無法獲得可讓您持續(xù)改進的反饋循環(huán)。
您可能想通過預(yù)測變化的影響而不是等待它們出現(xiàn)在指標(biāo)中來解決此問題,但這通常是不明智的(請參閱上面的原則2)。
當(dāng)然,跟蹤收入等滯后指標(biāo)很重要(尤其是對于財務(wù)或領(lǐng)導(dǎo)層而言),但大多數(shù)團隊?wèi)?yīng)該花大部分時間關(guān)注領(lǐng)先指標(biāo)。
原則 4:指標(biāo)應(yīng)該難以操縱
一旦你選定一個指標(biāo)并要求人們負(fù)責(zé)改進該指標(biāo),他們就會找到最有效的方法來做到這一點。這通常會導(dǎo)致意想不到的結(jié)果。以下是一個例子:
Facebook 希望向用戶展示相關(guān)內(nèi)容,以增加他們在網(wǎng)站上停留的時間
由于“相關(guān)性”難以衡量,他們使用參與度指標(biāo)作為代理(喜歡、評論等)。
出版商和創(chuàng)作者意識到算法的工作原理,并找到心理操縱的方法來增加參與度 ? Click Bait 和Rage Bait誕生
“當(dāng)一項措施成為目標(biāo)時,它就不再是一項好的措施。”
— 古德哈特定律
在上面的例子中,只要用戶繼續(xù)在平臺上花費時間,F(xiàn)acebook 可能就不會介意質(zhì)量下降。但在很多情況下,如果指標(biāo)被大規(guī)模操縱,就會造成嚴(yán)重?fù)p害。
假設(shè)您提供推薦獎金,用戶因推薦注冊而獲得獎勵。最有可能會發(fā)生什么?人們將嘗試創(chuàng)建數(shù)十個虛假賬戶來領(lǐng)取獎金。更好的推薦指標(biāo)是要求在平臺上達到最低交易金額(例如 25 美元)才能獲得獎金。
因此,防止操縱的一種方法是設(shè)計指標(biāo)來限制您預(yù)期的不良行為。另一種方法是將指標(biāo)配對。這種方法是由安迪·格羅夫在他的《高產(chǎn)出管理》一書中介紹的:
“因此,由于指標(biāo)指導(dǎo)一個人的活動,你應(yīng)該警惕反應(yīng)過度。你可以通過將指標(biāo)配對來做到這一點,這樣就可以同時衡量效果和反作用。”
— 安迪·格魯夫,《高產(chǎn)出管理》
在實踐中,情況會怎樣?如果您只是因為希望客戶立即獲得幫助而以“第一時間響應(yīng)”為標(biāo)準(zhǔn)激勵客戶支持代理,那么他們只會對每張新工單回復(fù)一條通用消息。但如果您將其與工單解決時間(或客戶滿意度)目標(biāo)結(jié)合起來,則可以確保代理真正專注于更快地解決客戶問題。
原則 5:好的指標(biāo)不應(yīng)設(shè)定任意的閾值
你會發(fā)現(xiàn)科技公司中的許多流行指標(biāo)都與閾值相關(guān)。
例如:
至少有 5 個連接的用戶數(shù)
視頻觀看次數(shù) > 1,000
這是有道理的;通常,采取行動本身并不是一個很有價值的信號,你需要設(shè)置一個閾值來使指標(biāo)有意義。觀看大部分視頻的人與只是點擊視頻的人有很大不同。
但是:閾值不應(yīng)該是任意的。
不要因為“1,000 次觀看”是個不錯的整數(shù)就選擇它;這個門檻應(yīng)該以數(shù)據(jù)為基礎(chǔ)。觀看次數(shù)達到 1,000 次的視頻之后的點擊率會更高嗎?還是會催生出更多后續(xù)內(nèi)容?創(chuàng)作者留存率會更高嗎?
例如,Twitch會測量觀看直播時間至少為 5 分鐘的用戶數(shù)量。雖然數(shù)據(jù)顯然影響了這一選擇,但目前尚不清楚他們最終為何選擇 5 分鐘。
在 Uber,我們嘗試讓數(shù)據(jù)告訴我們閾值應(yīng)該在哪里。例如,我們發(fā)現(xiàn)附近有很多其他餐廳的餐廳在 UberEats 上更可靠,因為更容易留住送餐員。我們根據(jù)我們在圖表中看到的“肘部”設(shè)定了我們認(rèn)為低密度餐廳的閾值:
這種方法在許多業(yè)務(wù)領(lǐng)域都有效;例如,我們還發(fā)現(xiàn),一旦乘客或司機在平臺上達到一定數(shù)量的初次出行,他們就更有可能留下來。
您并不總是能找到像這樣的“神奇”閾值,但您應(yīng)該在確定任意值之前嘗試識別一個閾值。
原則 6:良好的指標(biāo)創(chuàng)造背景
沒有上下文的絕對數(shù)字很少有用。你經(jīng)常會看到這樣的新聞公告:
“為客戶處理了 10 億行數(shù)據(jù)”,或者
“我們平臺向創(chuàng)作者支付了 1 億美元的收益”
這些數(shù)字什么都說明不了。要想讓它們有意義,就必須把它們放在上下文中。平臺上每個創(chuàng)作者的平均收入是多少?在什么時間范圍內(nèi)?換句話說,將絕對數(shù)字轉(zhuǎn)化為比率可以增加背景信息。
當(dāng)然,上述例子中有些是故意的;公司不想讓公眾知道細節(jié)。但這個問題并不僅限于新聞稿和博客文章。
從絕對角度來看您的銷售渠道可能會告訴您它是否隨著時間的推移而增長;但要使其真正有意義,您必須將其與銷售團隊的規(guī)?;蛩麄兂袚?dān)的配額聯(lián)系起來。這為您提供了渠道覆蓋率,即渠道與配額的比率,這是一個更有意義的指標(biāo)。
創(chuàng)建這些類型的比率還可以使比較更具洞察力和公平性;例如,比較每個部門的收入將使大部門看起來更好,但比較每個員工的收入可以實際了解生產(chǎn)力。
原則 7:指標(biāo)需要明確的所有者來控制該指標(biāo)
如果您希望看到某個指標(biāo)發(fā)生變化,您需要有一個人負(fù)責(zé)改進它。
即使多個團隊的工作有助于提高指標(biāo),您仍然需要一個負(fù)責(zé)實現(xiàn)目標(biāo)的“所有者”(否則您最終會陷入互相指責(zé)的境地)。
這里有三種潛在的問題場景:
沒有主人。沒有人執(zhí)著于改進它,這個指標(biāo)將繼續(xù)沿著當(dāng)前的軌跡發(fā)展。
多個所有者。所有權(quán)不明確會導(dǎo)致摩擦和缺乏責(zé)任感。例如,在 UberEats ,有時不清楚某些指標(biāo)是歸當(dāng)?shù)爻鞘袌F隊還是中央運營團隊所有。在很短的一段時間里,我們花在開會討論這個話題上的時間比實際執(zhí)行的時間還多。
缺乏控制。任命一個無力(或感覺無力)改變指標(biāo)的所有者是導(dǎo)致失敗的另一個原因。這可能是因為所有者沒有直接控制指標(biāo)的手段、沒有預(yù)算來這樣做,或者缺乏其他團隊的支持
原則 8:好的指標(biāo)可以最大限度地減少噪音
只有當(dāng)您能夠解讀指標(biāo)的變化時,指標(biāo)才具有可操作性。要獲得清晰的讀數(shù),您需要盡可能多地消除“噪音”源。
例如:
假設(shè)您是一家小型 B2B SaaS 初創(chuàng)公司,您將網(wǎng)絡(luò)流量視為漏斗頂部的領(lǐng)先指標(biāo)。如果您只查看“原始”訪問次數(shù),那么您會受到來自您自己的員工、朋友和家人以及訪問網(wǎng)站的現(xiàn)有客戶的干擾,并且您可能會發(fā)現(xiàn)網(wǎng)絡(luò)流量和漏斗下端指標(biāo)之間的相關(guān)性很小。
如果可能的話,從報告中排除這些流量來源,將使您更好地了解潛在客戶渠道的實際情況。
原則 9:某些指標(biāo)應(yīng)成為行業(yè)標(biāo)準(zhǔn)
對于某些指標(biāo),重要的是它們可以在公司之間進行比較。例如,如果您從事 B2B SaaS 業(yè)務(wù),您的 CFO 會希望將您的凈收入保留率 (NRR)、CAC 回報或 Magic Number 與競爭對手進行比較(您的投資者也會希望這樣做)。
如果您以不符合市場標(biāo)準(zhǔn)的方式計算這些指標(biāo),您將無法通過基準(zhǔn)測試獲得任何見解,并會造成很多混亂。這并不是說您不應(yīng)該編造指標(biāo);事實上,在我的職業(yè)生涯中,我自己也編造了一些指標(biāo)(可能會寫一篇單獨的文章來介紹如何做到這一點)。
但大多數(shù)財務(wù)和效率指標(biāo)的定義最好保持不變。
綜上所述
綜上所述,我想明確一點:對于任何用例來說,都沒有完美的指標(biāo)。每個指標(biāo)都會有缺點,你需要選擇“最不壞”的那個。
希望上述原則能夠幫助您做到這一點。
分享到微信 ×
打開微信,點擊底部的“發(fā)現(xiàn)”,
使用“掃一掃”即可將網(wǎng)頁分享至朋友圈。