a/b testing

資源來(lái)自u(píng)dacity

1.ab testing不能做的事?

新的實(shí)驗(yàn)
丟失了一些數(shù)據(jù)

ab可以做的事情

測(cè)試

2.商業(yè)案例分析

image.png

左邊的這個(gè)漏斗式 不會(huì)是一步接著一步發(fā)生,有時(shí)會(huì)折回去再發(fā)生
實(shí)驗(yàn)例子: 改變網(wǎng)站的start now的顏色,會(huì)不會(huì)學(xué)生增多?

2.1 度量選擇

在上面那個(gè)例子中,start now的度量更改


image.png

you use a rate when you want to measure the usability of the site ,and a probability when you want to measure the total impact

在這個(gè)例子里。the rate will say how often do they actually find that botton

if you want to know how often users went to second level page on your site, use probability

3.伯努利分布

伯努利分布事件判斷

ab testing一般遵從伯努利分布,但是要注意前提是獨(dú)立事件,這個(gè)比較難判斷

4.計(jì)算置信區(qū)間

公式

計(jì)算公式

5.假設(shè)檢驗(yàn)

為了測(cè)試結(jié)果,我們做假設(shè)檢驗(yàn)
baseline: 零假設(shè) eg:試驗(yàn)組和對(duì)立組沒(méi)有區(qū)別
備擇假設(shè)alternative:

雙尾檢驗(yàn)vs單尾檢驗(yàn)

假設(shè)檢驗(yàn)

6.標(biāo)準(zhǔn)誤差

7.HOW many page views?

7.1 statistical power

7.2 significance level

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容