如何七周成為數(shù)據(jù)分析師15:讀了本文,你就懂了概率分布

秦路
4 評論 21824 瀏覽 77 收藏 18 分鐘
B端产品经理要负责对目标行业和市场进行深入的分析和调研,了解客户的需求、痛点、期望和行为,找到产品的价值主张 🔗

本文是《如何七周成為數(shù)據(jù)分析師》的第十五篇教程,如果想要了解寫作初衷,可以先行閱讀七周指南。溫馨提示:如果您已經(jīng)熟悉概率分布,大可不必再看這篇文章,或只挑選部分。

我們已經(jīng)了解概率的基礎(chǔ),概率中通常將試驗的結(jié)果稱為隨機變量。隨機變量將每一個可能出現(xiàn)的試驗結(jié)果賦予了一個數(shù)值,包含離散型隨機變量和連續(xù)型隨機變量。

擲硬幣就是一個典型的離散型隨機變量,離散隨機變量可以取無限個但可數(shù)的數(shù)值。而連續(xù)變量相反,它在某一個區(qū)間內(nèi)能取任意的數(shù)值。時間就是一個典型的連續(xù)變量,1.25分鐘、1.251分鐘,1.2512分鐘,它能無限分割。

既然隨機變量可以取不同的值,統(tǒng)計學(xué)家就用概率分布描述隨機變量取不同值的概率。相對應(yīng)的,有離散型概率分布和連續(xù)型概率分布。

對于離散型隨機變量x,定義一個概率函數(shù)叫f(x),它給出了隨機變量取每一個值的概率。

拿出一個骰子,擲到6的概率是f(6) = 1/6,擲到1和6的概率則是f(1)+f(6) = 1/3。

數(shù)學(xué)期望和方差

現(xiàn)在有一個運營活動,兩套抽獎概率方案,如下:

作為運營人員,應(yīng)該怎么衡量兩種抽獎方法的好壞呢?

數(shù)學(xué)期望是對隨機變量中心位置的一種度量。是試驗中每次可能結(jié)果的乘以其結(jié)果的總和。簡單說,它是概率中的平均值,可以用期望對比兩套方案。

假設(shè)一等獎成本1000元,二等獎成本500元,三等獎成本100元,歡迎下次再來當(dāng)然沒錢,而用戶參加一次抽獎需要5元。我們將概率問題轉(zhuǎn)換成運營方的收益和成本計算期望(下面的盈虧是公司角度的)。

于是E(x) = (-990*5%)+(-490*10%)+(-90*20%)+(10*65%) = -110。也就是說,A方案能夠期望每次抽獎運營方虧損110元。計算一下B方案,則是虧損150元。如果從用戶的角度看,每一次抽獎的期望則反過來,即一等獎能受益990元,二等獎能受益490元…A方案玩一次平均收益110元。

想必大家已經(jīng)知道了如何設(shè)計活動的盈虧機制,感興趣可以自行調(diào)節(jié)中獎概率和成本。

期望值衡量概率的平均值,可是抽獎本來就是很激動人心的事情,哪怕明知道會賠錢,人們還樂此不疲,為什么?因為風(fēng)險,因為以小搏大。

方差就是這種風(fēng)險的度量,即隨機變量的變異性。它和描述統(tǒng)計學(xué)的方差是一個含義。

方差越大,隨機變量的結(jié)果越不穩(wěn)定,計算A方案的方差如下:

方差最后為62600,說明期望的波動很大。標準差為sqrt(62600) = 250.19,代表每一次的抽獎,與期望收益-110的距離是250.19元。

到這里,概率和期望方差的基本玩法已經(jīng)講完了。

二項概率分布

二項分布是一種離散型的概率分布。故明思義,二項代表它有兩種可能的結(jié)果,把一種稱為成功,另外一種稱為失敗。

除了結(jié)果的規(guī)定,它還需要滿足其他性質(zhì):每次試驗成功的概率均是相同的,記錄為p;失敗的概率也相同,為1-p。每次試驗必須相互獨立,該試驗也叫做伯努利試驗,重復(fù)n次即二項概率。

擲硬幣就是一個典型的二項分布。當(dāng)我們要計算拋硬幣n次,恰巧有x次正面朝上的概率,可以使用二項分布的公式:

假設(shè)拋硬幣5次,恰巧有3次正面朝上,則其概率為31.25%。可以使用Excel中的BINOM.DIST函數(shù)計算。

不妨把題目變化一下,變成計算硬幣至少有三次正面朝上的概率是多少?有一種簡單的方法是累加,將恰巧有3次,恰巧有4次,恰巧有5次的概率相加,結(jié)果便是至少3次,為50%。

回到運營活動的例子,上面一個運營活動公司虧慘了,現(xiàn)在運營需要重新做一個抽獎活動,每位用戶擁有10次抽獎機會,中獎概率是5%。老板準備先考慮成本問題,想知道至少有3次以上中獎機會的概率是多少?

按照上題的思路,可以拿恰巧3次,恰巧4次直到恰巧10次累加求和,但是這樣太麻煩了。此時可以換一個思路,先計算最多2次的概率是多少。那么便是f(0)+f(1)+f(2),結(jié)果是92.98%,利用概率公式1-92.98%,就是至少3次的概率了,為7.02%。看來老板還是能松口氣的。

二項概率的數(shù)學(xué)期望為E(x) = np,方差Var(x) = np(1-p)。抽獎10次,那么抽獎的期望值就是1,方差為0.9。

運營學(xué)會二項分布,在涉及概率的各種活動中,將變得游刃有余。它的原理甚至能用到AB測試。大學(xué)考試中二項概率需要查專門的概率表計算,不過現(xiàn)在各類工具層出不窮,Python、R、Excel都能直接計算。

泊松概率分布

泊松概率是另外一個常用的離散型隨機變量,它主要用于估計某事件在特定時間或空間中發(fā)生的次數(shù)。比如一天內(nèi)中獎的個數(shù),一個月內(nèi)某機器損壞的次數(shù)等。

泊松概率的成立條件是在任意兩個長度相等的區(qū)間中,時間發(fā)生的概率是相同的,并且事件是否發(fā)生都是相互獨立的。

泊松概率既然表示事件在一個區(qū)間發(fā)生的次數(shù),這里的次數(shù)就不會有上限,x取值可以無限大,只是可能性無限接近0,f(x)的最終值很小。

x代表發(fā)生x次,u代表發(fā)生次數(shù)的數(shù)學(xué)期望,概率函數(shù)為:

現(xiàn)在又舉辦了一個新的運營活動,這次的中獎概率未知,只知24小時內(nèi)中獎的平均個數(shù)為5個,老板異想天開地想知道24小時內(nèi)恰巧中獎次數(shù)為7的概率是多少?

此時x=7,u=5(區(qū)間內(nèi)發(fā)生的平均次數(shù)就是期望),代入公式求出概率為10.44%。Excel中的函數(shù)為POISSON.DIST。

接下來繼續(xù)加大問題難度,求中獎次數(shù)至少7次的概率。此時f(0)+f(1)+f(2)+f(3)+f(4)+f(5)+f(6)=86.66%,那么至少七次的概率為13.33%。

如果問題變成12小時內(nèi)呢?老板希望知道12小時內(nèi)中獎次數(shù)為3次的概率是多少?

24小時內(nèi)中獎概率的期望數(shù)是5,那么12小時內(nèi)的中獎概率期望數(shù)是2.5,于是令u=2.5,求出12小時內(nèi)中獎次數(shù)為3的概率是79.99%。

泊松概率還有一個重要性質(zhì),它的數(shù)學(xué)期望和方差相等,所以上題的方差為2.5,標準差為根號2.5,即1.58。

正態(tài)分布

上述分布都是離散概率分布,當(dāng)隨機變量是連續(xù)型時,情況就完全不一樣了。因為離散概率的本質(zhì)是求x取某個特定值的概率,而連續(xù)隨機變量不行,它的取值是可以無限分割的,它取某個值時概率近似于0。連續(xù)變量是隨機變量在某個區(qū)間內(nèi)取值的概率,此時的概率函數(shù)叫做概率密度函數(shù)。

正態(tài)概率分布是連續(xù)型隨機變量中最重要的分布。世界上絕大部分的分布都屬于正態(tài)分布,人的身高體重、考試成績、降雨量等都近似服從。

正態(tài)分布如同一條鐘形曲線。中間高,兩邊低,左右對稱。想象身高體重、考試成績,是否都呈現(xiàn)這一類分布態(tài)勢:大部分數(shù)據(jù)集中在某處,小部分往兩端傾斜。

正態(tài)概率密度函數(shù)為:

是不是看得頭暈了?u代表均值,σ代表標準差,兩者不同的取值將會造成不同形狀的正態(tài)分布。均值表示正態(tài)分布的左右偏移,標準差決定曲線的寬度和平坦,標準差越大曲線越平坦。

以前介紹過一個正態(tài)分布的經(jīng)驗法則:

正態(tài)隨機變量有69.3%的值在均值加減一個標準差的范圍內(nèi),95.4%的值在兩個標準差內(nèi),99.7%的值在三個標準差內(nèi)。這條經(jīng)驗法則可以幫助我們快速計算數(shù)據(jù)的大體分布。

均值u=0,標準差σ=1的正態(tài)分布叫做標準正態(tài)分布。它的隨機變量用z表示,它是推斷統(tǒng)計的基礎(chǔ)。將均值和標準差代入正態(tài)概率密度函數(shù),得到一個簡化的公式:

現(xiàn)在可以用簡化的公式計算概率密度了。首先學(xué)習(xí)一個新的函數(shù)叫累計分布函數(shù),它是概率密度函數(shù)的積分。用P(X<=x)表示隨機變量小于或者等于某個數(shù)值的概率,F(xiàn)(x) = P(X<=x)。

曲線就是概率密度函數(shù),當(dāng)x取某個值時,曲線上f(x)點的數(shù)值即表示隨機變量在對應(yīng)的x點值的取值概率,曲線與X軸相交的陰影面積就是累計分布函數(shù)。我們不妨把概率密度函數(shù)按其名字簡單理解成「密度」,畢竟連續(xù)變量只有在區(qū)間中才有計算的意義,于是密度函數(shù)充當(dāng)了輔助計算的角色。分析中我們更多實用累計分布函數(shù)。

標準正態(tài)分布中,給定一個值z,可以計算隨機變量z小于等于某一個值的概率;z在兩個值之間的概率;以及z大于等于一個值的概率。這三種計算都用到累計分布函數(shù),分別記作P(z<=x),P(x1<=z<=x2),P(z>=x)。

首先計算z小于等于1的概率,即P(z<=1)。由excel 的函數(shù)NORM.DIST(1,0,1,TRUE)求得值為0.8413。于是P(z<=1)=0.8413。同理,P(z>1) = 1-P(z<=1) = 0.1586。

若要計算z在區(qū)間-1~1.25的概率,即P(-1<=z<=1.25)??梢詫⑵洳鸾鉃楣剑篜(-1<=z<=1.25) = P(z<=1.25) – P(z<=-1) = 0.735。

如果大家在公式轉(zhuǎn)換中有困惑,不妨結(jié)合上面的陰影圖看??孔蟮年幱凹磟小于等于0.8時(目測)的概率,如果我們要算0~0.8之間的概率呢?就是把z<=0的那一半給挖掉,非常粗暴的算法。

到了這里大家可能發(fā)覺,在正態(tài)分布的計算中,不論求哪一類區(qū)間,我們都是先轉(zhuǎn)換成z小于等于某個值先計算。這是一個潛移默化的規(guī)則,因為早期正態(tài)概率的計算都要用到標準正態(tài)概率表,它以z小于等于作查詢標準?,F(xiàn)在雖然計算資源已經(jīng)大大豐富,但是這個習(xí)慣還是保留了下來。

之所以強調(diào)標準正態(tài)分布,是因為所有的正態(tài)分布概率都可以利用標準正態(tài)分布計算。當(dāng)我們具有一個任意均值的u和標準差σ,都能將其轉(zhuǎn)換成標準狀態(tài)分布。

現(xiàn)在有一個u=10和σ=2的正態(tài)隨機變量,求x在10與14之間的概率是多少?

當(dāng)x=10時,z=(10-10)/2=2。當(dāng)x=14時,z=(14-10)/2=2。于是x在10和14之間的概率等價于標準正態(tài)分布中0和2之間的概率。計算P(0<=z<=2) =P(z<=2) – P(z<=0) =0.4772。

現(xiàn)在是最后一個運營活動了,不再是抽獎,而是最終贈送獎品的環(huán)節(jié)。已知獎品的保質(zhì)期滿足正態(tài)分布,均值90天,標準差5天。為了考慮用戶體驗,想知道獎品70天以內(nèi)就壞的概率是多少?

當(dāng)x=70時,有z=(70-90)/5 = -4。p(z<=-4)=0.003%。概率非常小,可以忽略不計,所以產(chǎn)品質(zhì)量杠杠的。經(jīng)歷了那么多活動,老板終于可以松一口氣了。

在概率分布中還有一個概念叫正態(tài)近似。當(dāng)試驗次數(shù)很大時,二項分布可以近似于正態(tài)分布,泊松分布也有相似的情況,大家有興趣可以去了解,這是一種簡便方法,不過工作中現(xiàn)在都是計算機了,這點反而不重要了。

了解完各類分布后,我們將進入最后的環(huán)節(jié),假設(shè)檢驗,它是基于概率的理論,數(shù)據(jù)分析中的AB測試,就是其最常見的應(yīng)用。

相關(guān)閱讀

互聯(lián)網(wǎng)數(shù)據(jù)分析能力的養(yǎng)成,需一份七周的提綱

如何七周成為數(shù)據(jù)分析師01:常見的Excel函數(shù)全部涵蓋在這里了

如何七周成為數(shù)據(jù)分析師02:Excel技巧大揭秘

如何七周成為數(shù)據(jù)分析師03:手把手教你Excel實戰(zhàn)

如何七周成為數(shù)據(jù)分析師:Excel技巧之甘特圖繪制(項目管理)

如何七周成為數(shù)據(jù)分析師:Excel技巧之打造多級菜單

如何七周成為數(shù)據(jù)分析師04:數(shù)據(jù)可視化之經(jīng)典圖表合集

如何七周成為數(shù)據(jù)分析師05:數(shù)據(jù)可視化之打造升職加薪的報表

如何七周成為數(shù)據(jù)分析師06:數(shù)據(jù)可視化之手把手打造BI

如何七周成為數(shù)據(jù)分析師07:快速掌握麥肯錫的分析思維

如何七周成為數(shù)據(jù)分析師08:如何建立數(shù)據(jù)分析的思維框架?

如何七周成為數(shù)據(jù)分析師09:寫給新人的數(shù)據(jù)庫指南

如何七周成為數(shù)據(jù)分析師10:SQL,從入門到熟練

如何七周成為數(shù)據(jù)分析師11:SQL,從熟練到掌握

如何七周成為數(shù)據(jù)分析師12:解鎖數(shù)據(jù)分析的正確姿勢(上)

如何七周成為數(shù)據(jù)分析師13:解鎖數(shù)據(jù)分析的正確姿勢(下)

如何七周成為數(shù)據(jù)分析師14:概率論的入門指南

#專欄作家#

秦路,微信公眾號ID:tracykanc,人人都是產(chǎn)品經(jīng)理專欄作家。

本文由 @秦路?原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可,禁止轉(zhuǎn)載。

更多精彩內(nèi)容,請關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號或下載App
評論
評論請登錄
  1. 最多兩次中獎的概率應(yīng)該是63.2%吧

    來自江蘇 回復(fù)
  2. 泊松分布那一段,“24小時內(nèi)中獎概率的期望數(shù)是5,那么12小時內(nèi)的中獎概率期望數(shù)是2.5,于是令u=2.5,求出12小時內(nèi)中獎次數(shù)為3的概率是79.99%?!睂戝e了。小于等于3次的概率是78.62%,大于等于3次是21.37%。謝謝。

    來自江蘇 回復(fù)
  3. 那個抽獎時10元每次吧,文中寫了5元。

    來自廣東 回復(fù)
  4. 以前都是小學(xué)初中學(xué)的內(nèi)容,現(xiàn)在尼瑪居然看不懂了,我還是我么

    來自廣東 回復(fù)
专题
34611人已学习23篇文章
不懂心理学,怎么懂你的用户;不懂你的用户,又怎么做好产品的设计和运营。
专题
30715人已学习19篇文章
2018年过去了,你都收获了什么?新的一年,你需要如何前行?
专题
13224人已学习16篇文章
本专题的文章分享了心理学如何影响用户决策。
专题
97373人已学习11篇文章
不管你是产品、运营、设计、还是技术,流程图都是基础技能。
专题
12785人已学习14篇文章
在这个大数据时代,数据对于企业的重要性越来越明显,因此不少企业将数据作为推动一款产品的重要前提。本专题的文章分享了如何用数据去驱动决策。
专题
13707人已学习13篇文章
本专题的文章分享了关于教育+AI的思考。