世上雖沒(méi)后悔藥,但有近似的替代方案——A/B Test

1

我非常喜歡看一些所謂成功人士的人生經(jīng)歷。

尤其是他們?cè)假Y本積累的部分。

王朔說(shuō)成功人士就是賺了一些錢,然后讓煞筆知道的人,我覺(jué)得至少有九成的人確實(shí)是這樣,靠著投機(jī)取巧就突然成功了,贏得莫名其妙的。

這部分人爹味還很重,好為人師,成天教你做人,告訴你奮斗的重要性,決口不提自己當(dāng)初的運(yùn)氣和家里的資本。

我也接觸過(guò)一部分很明顯更“成功”的一些人,也賺到錢了,也有真正的行業(yè)影響力,是真正的大佬。

這部分人反而很謙虛,會(huì)承認(rèn)自己的成功是因?yàn)轱L(fēng)口來(lái)了,時(shí)代給的上車機(jī)會(huì)。

這種人,我還是愿意瑞思拜的。

而這部分人里崛起最快的,往往都是銷售出身。

銷售能夠直接給公司帶來(lái)業(yè)績(jī),帶來(lái)直接的現(xiàn)金流回款,老板也愿意提拔,這當(dāng)然是最重要的原因。

但你如果認(rèn)識(shí)一些超級(jí)大銷售的話,就會(huì)發(fā)現(xiàn)他們的學(xué)習(xí)能力和其他領(lǐng)導(dǎo)力技能上也都是點(diǎn)滿了的。

同樣的時(shí)間里,銷售往往成長(zhǎng)的速度更快。

他們成長(zhǎng)快是因?yàn)檫@個(gè)工作的反饋機(jī)制最明確、周期最短。

單子成交還是拒絕,反饋不要太直接。

這種及時(shí)反饋會(huì)讓大部分人放棄。

但也會(huì)讓小部分人不斷去找失敗原因,然后反復(fù)去糾正、練習(xí)、嘗試,然后繼續(xù)。

然后迎來(lái)蛻變。

但很多崗位和行為的反饋周期是非常漫長(zhǎng)的,在這種長(zhǎng)周期下,行為是得不到及時(shí)矯正的,沒(méi)有及時(shí)矯正就會(huì)南轅北轍,離正確的道路越來(lái)越遠(yuǎn)。

在沒(méi)有反饋的情況下,你越努力,有可能越走歪。

在戰(zhàn)略錯(cuò)誤的情況下,戰(zhàn)術(shù)越正確,越不可能贏。

進(jìn)步是需要反饋的,如果沒(méi)有反饋,人類無(wú)法獲得進(jìn)步。

沒(méi)有反饋,你不知道自己的優(yōu)勢(shì)在哪里,更不知道自己的劣勢(shì)在哪里。你不知道向哪里使力,向哪個(gè)方向投入時(shí)間。

這也是老師存在的必要性,傳道授業(yè)解惑,這三個(gè)功能不夠,其實(shí)最重要的一個(gè)功能是反饋。

正確的反饋,及時(shí)的反饋。

2

努力其實(shí)是分成兩個(gè)部分的,一個(gè)部分是刻苦訓(xùn)練,一個(gè)部分是找有效反饋。

如果方向是對(duì)的,有效反饋會(huì)讓你明確自己努力是有用的、是前途光明的,從而在心態(tài)上愿意付出更多的時(shí)間和精力。

在這種情況下,有效反饋是杠桿,能讓你加速。

如果方向是錯(cuò)的,有效反饋是會(huì)讓你知道自己努力是錯(cuò)的,你可以迅速止損,不再投入任何精力。

有些時(shí)候你所謂的情懷,只是自己感動(dòng)自己,是你明知道反饋告訴你不該繼續(xù)了,你還留戀。

戀的只是自己的沉沒(méi)成本。

沉沒(méi)成本是很多產(chǎn)品反饋周期長(zhǎng)的原因。

給大家舉個(gè)簡(jiǎn)單的例子,比如我買了一款老牌轎車,結(jié)果拿到之后三個(gè)月就有了另一款更適合我的車,而且價(jià)格更便宜。

這個(gè)時(shí)候由于售后門檻的問(wèn)題,我實(shí)際上大概率會(huì)繼續(xù)原有選擇的,而且由于資金的約束,大概率在接下來(lái)的五年時(shí)間里會(huì)繼續(xù)在原有的車上投入更多的花費(fèi),比如持續(xù)的保養(yǎng)。

這個(gè)例子在房子上更是如此,價(jià)錢越貴的產(chǎn)品,遷移成本越高,沉沒(méi)成本也越高,廠商或者開(kāi)發(fā)商所接到的反饋周期就越長(zhǎng)。

我可能不喜歡你的產(chǎn)品,但因?yàn)檫w移成本太高了,我會(huì)沉默,不會(huì)給你反饋。

這個(gè)就是為什么快消品給人的氣質(zhì)會(huì)更市場(chǎng)化、更接地氣以及反應(yīng)速度更快一些。

因?yàn)榉答伩?,你早上覺(jué)得A汽水不好喝,中午就可以買B汽水。

反饋快,容易死得快,但也容易讓你進(jìn)步。

反饋慢,死得也慢,但危機(jī)真來(lái)了都是大危機(jī),幾乎沒(méi)有辦法拯救。

快消品的價(jià)格是幾塊錢,互聯(lián)網(wǎng)的產(chǎn)品是不要錢,所以互聯(lián)網(wǎng)用戶更沒(méi)有任何忠誠(chéng)度、心理負(fù)擔(dān)和沉沒(méi)成本,發(fā)現(xiàn)你不好用了,馬上就掉轉(zhuǎn)槍口轉(zhuǎn)向友商。

當(dāng)年MySpace的失敗就是一個(gè)典型的例子。西方新聞業(yè)的扛把子默多克掌控了大量的傳統(tǒng)紙媒巨頭,在做MySpace的時(shí)候卻不太注重用戶體驗(yàn)。

如果你還對(duì)這款產(chǎn)品有印象的話,你大概率還會(huì)記得只要打開(kāi)其他人的myspace主頁(yè),音樂(lè)便會(huì)自動(dòng)播放。

對(duì)于普通用戶而言,這一點(diǎn)極其奇葩。

因?yàn)槊總€(gè)人的音樂(lè)審美不一樣,喜歡古典音樂(lè)的人點(diǎn)開(kāi)了一個(gè)喜歡鳳凰傳奇的朋友的頁(yè)面,廣場(chǎng)舞音樂(lè)不請(qǐng)自來(lái),對(duì)這個(gè)用戶來(lái)說(shuō),這個(gè)體驗(yàn)就過(guò)于糟糕了。

當(dāng)然反過(guò)來(lái)可能也是這樣,我就是一個(gè)很喜歡鳳凰傳奇的人。

用戶不喜歡會(huì)和你說(shuō)為什么不喜歡嗎?

不會(huì)的,他直接就去用FACEBOOK了。

等默老師發(fā)現(xiàn)他的產(chǎn)品慢慢地被人大規(guī)模唾棄的時(shí)候,已經(jīng)無(wú)藥可救了。

而荒謬的是,互聯(lián)網(wǎng)其實(shí)是最容易有反饋的行業(yè)。

互聯(lián)網(wǎng)產(chǎn)品本身就是由很多數(shù)據(jù)構(gòu)成的,而數(shù)據(jù)化和智能化的反饋機(jī)制是更容易搭建的、且周期性更短的。

所以互聯(lián)網(wǎng)企業(yè)的快,應(yīng)該是用數(shù)據(jù)反饋去快速迭代。

3

反饋重要,及時(shí)反饋、有效反饋重要,那問(wèn)題來(lái)了。

怎么才能找到真正的反饋呢。

我再舉一個(gè)例子。這個(gè)例子是之前字節(jié)的楊老師講過(guò)的,因?yàn)樘湫土?,我再?gòu)?fù)述一遍。

在2016年左右,有一家互聯(lián)網(wǎng)外企做的產(chǎn)品是PC端的新聞推薦。

他們有個(gè)部門是做數(shù)據(jù)優(yōu)化的,其中一個(gè)重要的KPI是提高新聞推薦質(zhì)量。

質(zhì)量這個(gè)東西吧,很容易把握不住,你說(shuō)家長(zhǎng)里短的本地新聞,質(zhì)量就不好嗎?

可能有人可能就好這一口,覺(jué)得這種新聞質(zhì)量就很高。

他們采用的標(biāo)準(zhǔn)是用戶使用時(shí)長(zhǎng),平均用戶使用時(shí)長(zhǎng)越高,KPI就越高。這個(gè)部門的KPI每年都超額完成,結(jié)果沒(méi)過(guò)幾年這個(gè)部門就被裁掉了。

時(shí)長(zhǎng)確實(shí)是在漲,不假,沒(méi)有水分。

但時(shí)長(zhǎng)增長(zhǎng)有兩種可能。

一種是用戶體驗(yàn)變好了、全體用戶看的時(shí)間更長(zhǎng)了;

還有一種可能是忠實(shí)用戶繼續(xù)留下來(lái)了,但他們也并沒(méi)有延長(zhǎng)自己的使用時(shí)長(zhǎng),而一些原本不怎么用的用戶覺(jué)得這個(gè)產(chǎn)品不好,就走了。

這些用戶走了以后,因?yàn)槿藬?shù)少了,分母變小了,平均時(shí)長(zhǎng)就變長(zhǎng)了。

雖然使用時(shí)長(zhǎng)在增加,但這個(gè)產(chǎn)品的用戶數(shù)量在持續(xù)下滑。

講個(gè)恐怖故事:產(chǎn)品越不好,部門KPI越高。

回到最初的時(shí)候,當(dāng)領(lǐng)導(dǎo)和你說(shuō)用戶時(shí)長(zhǎng)是一個(gè)可以反饋這款A(yù)PP推送質(zhì)量的標(biāo)尺的時(shí)候,你會(huì)不會(huì)也覺(jué)得沒(méi)有任何問(wèn)題,但現(xiàn)實(shí)就是這個(gè)反饋機(jī)制是錯(cuò)的,大錯(cuò)特錯(cuò),南轅北轍。

當(dāng)車真的走向北方的時(shí)候,你身在其中是不會(huì)覺(jué)得自己是錯(cuò)的,你就是覺(jué)得車子在向南走。

反饋標(biāo)準(zhǔn)和反饋機(jī)制誰(shuí)來(lái)定?誰(shuí)來(lái)有權(quán)決定這個(gè)產(chǎn)品的好壞?是老司機(jī)還是老師傅?

當(dāng)下這個(gè)時(shí)代,把老司機(jī)、老師傅的經(jīng)驗(yàn)和判斷當(dāng)成反饋的標(biāo)尺,是很容易翻車的。

因?yàn)槭袌?chǎng)大,變化也快,過(guò)往的經(jīng)驗(yàn)很大可能是用不上的。

4

最理想的反饋機(jī)制其實(shí)是吃后悔藥。

你做了一波操作A,發(fā)現(xiàn)卵用沒(méi)有,效果不好,一顆后悔藥下肚,啟動(dòng)時(shí)間機(jī)器。

再試一下B操作,B操作相對(duì)更好,效果拉滿了,可以可以。絲毫不影響窗口期,因?yàn)闀r(shí)間重新計(jì)算。

可惜,這個(gè)世界上現(xiàn)在還沒(méi)有這樣的黑科技。

倒是有近似的替代方案,做A/B測(cè)試。

當(dāng)你想做個(gè)活動(dòng)、做個(gè)產(chǎn)品甚至是給產(chǎn)品取個(gè)名字,只要是做選擇,就把人群和產(chǎn)品分成A、B兩組,隨機(jī)給流量測(cè)試哪種效果更好。

只改一個(gè)變量,其他變量不變。

這看起來(lái)是更為“理性”的反饋,時(shí)效性高、周期短以及明明白白。

對(duì),最重要的是,明明白白,尤其是對(duì)“上”的明明白白。

你把測(cè)試結(jié)果給老板看,哪怕老板再有什么神奇想法和奇葩思路,都會(huì)對(duì)這個(gè)測(cè)試結(jié)果心悅臣服坦然接受。

在決策和選擇上,人是不靠譜的,人先天就會(huì)有偏見(jiàn)和審美上的偏狹。相比人,A/B測(cè)試這種數(shù)據(jù)反饋是冷冰冰的,沒(méi)有偏見(jiàn)的。

但這種純數(shù)據(jù)反饋真的是萬(wàn)能的嗎?

恐怕也未必。

由于數(shù)據(jù)和人性之間總會(huì)有一些偏差,過(guò)于相信這種冷冰冰的答案可能也會(huì)犯錯(cuò)。

要多留一手,要搞組合,數(shù)據(jù)驅(qū)動(dòng)+人的決策,A/B測(cè)試完了再加點(diǎn)人的意見(jiàn)。

5

好反饋,治內(nèi)卷。

什么是內(nèi)卷,不是單純的競(jìng)爭(zhēng)激勵(lì)就是內(nèi)卷。

而是因?yàn)楦?jìng)爭(zhēng)激烈了,大家開(kāi)始拼表面功夫了,拼無(wú)用功了,下班了不走假加班,為了向上交差重復(fù)造輪,搞得所有人實(shí)際的ROI都降低了。

很多項(xiàng)目,錢也燒了,班也加了,最后過(guò)了一年半載了,發(fā)現(xiàn)沒(méi)卵用,公司也倒閉了,加班狗也沒(méi)有學(xué)到技術(shù)和經(jīng)驗(yàn)。

治療內(nèi)卷,就是要提高ROI。

在部門leader拍腦門決定要做項(xiàng)目A之前,先用A/B測(cè)試來(lái)驗(yàn)一下效果,先小規(guī)模去試,確認(rèn)是最優(yōu)的方案再投入資源。

ROI提高了,部門業(yè)績(jī)也上升了,公司賺錢了,大家獎(jiǎng)金和成就感就有了。

卷嗎,不卷,良心競(jìng)爭(zhēng)。

即使放在整個(gè)公司層面,A/B測(cè)試仍然是對(duì)抗“卷”的法寶。

互聯(lián)網(wǎng)公司習(xí)慣搞賽馬,一個(gè)項(xiàng)目交給幾個(gè)團(tuán)隊(duì)一起搞,部門互相PK,誰(shuí)跑出來(lái)算誰(shuí)。

巨頭可以這么搞,無(wú)所謂,他們資源多,錯(cuò)過(guò)窗口也無(wú)所謂,有老本可以吃。中小公司還是不要照貓畫(huà)虎,減少重復(fù)造輪子,能A/B測(cè)試就先測(cè)一下。

A/B測(cè)試有點(diǎn)像什么呢,就是人在爬山的時(shí)候遇到很多級(jí)的臺(tái)階。你每一爬一級(jí)就算一下自己邁左腳還是右腳更踩得猛,看起來(lái)你是在消耗時(shí)間,但其實(shí)不是,因?yàn)槟悴鹊煤芊€(wěn),這個(gè)測(cè)試也可能只消耗你0.00000001S,你既穩(wěn)還沒(méi)有錯(cuò)過(guò)窗口期。

但你的競(jìng)爭(zhēng)對(duì)手呢,可能每一步都是拍腦袋,是每一步都更快一點(diǎn),但每一步都是靠運(yùn)氣。有可能前面運(yùn)氣都不錯(cuò),馬上就要登頂了,踩空了。

6

一些互聯(lián)網(wǎng)公司稱為巨頭,是因?yàn)樗麄儌€(gè)頭大,也是因?yàn)樗麄冊(cè)趨⑴c整個(gè)互聯(lián)網(wǎng)的基建。

電商平臺(tái)做出了公有云和移動(dòng)支付,減少了整個(gè)社會(huì)的交易成本,也讓其他電商平臺(tái)在基建上得以崛起。

同樣,技術(shù)牛X的互聯(lián)網(wǎng)巨頭同樣可以輸出自己的技術(shù)能力,成為整個(gè)互聯(lián)網(wǎng)生態(tài)里的底層設(shè)施和基建。

在當(dāng)下這幾個(gè)互聯(lián)網(wǎng)巨頭里,字節(jié)跳動(dòng)被公認(rèn)為重視數(shù)據(jù)驅(qū)動(dòng)的大廠,今日頭條和抖音不僅僅是算法產(chǎn)品,也是數(shù)據(jù)驅(qū)動(dòng)下的產(chǎn)物。

字節(jié)旗下的火山引擎就是把字節(jié)的同款技術(shù)拿出來(lái),賣給企業(yè)客戶。

互聯(lián)網(wǎng)公司擅長(zhǎng)引流,火山引擎推出的“火種計(jì)劃”向1000家小微企業(yè)免費(fèi)開(kāi)放多款技術(shù)產(chǎn)品,這里面就有A/B測(cè)試。

當(dāng)然了,商業(yè)的就是商業(yè)的,天下哪有真正免費(fèi)的午餐呢。

如果你覺(jué)得超級(jí)流量主字節(jié)是為了圖銀子做這事,那么你格局小了。

作為一家人數(shù)超過(guò)十萬(wàn)人的組織,字節(jié)有大公司病。

這個(gè)沒(méi)有辦法,人一多幺蛾子就容易多,效率降低,戰(zhàn)斗力下降。一個(gè)組織到了一個(gè)階段一定是會(huì)有瓶頸的,這個(gè)無(wú)所謂。

對(duì)于一家以技術(shù)見(jiàn)長(zhǎng)的公司,其他都可以磨損和消耗,但技術(shù)一定要保持牛X的狀態(tài),否則就會(huì)被友商吊打。

怎么保持戰(zhàn)斗力,讓技術(shù)中臺(tái)出去,去做乙方,去接客。

你在內(nèi)部做得不好,同事會(huì)給你面子,你要是當(dāng)乙方做不好,甲方會(huì)錘死你。

甲方會(huì)更挑剔,活不好就會(huì)被埋汰,被嫌棄,倒逼自己的技術(shù)保持一個(gè)高水準(zhǔn)的狀態(tài)。

這是字節(jié)的陽(yáng)謀。

練兵,還能做些有價(jià)值的事,挺好,贏麻了。

作為中小企業(yè),還等什么呢,薅羊毛,蹭補(bǔ)貼,技術(shù)普惠掉下來(lái)要接著,不蹭白不蹭。

這是一次短平快的嘗試,應(yīng)該要?jiǎng)悠饋?lái)了。

哪怕證明不適合自己,也是一次有效的嘗試。

證偽,同樣具有價(jià)值。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 )