3.7 如何做效果回歸

• 方法論

  
  

• 項(xiàng)目啟動(dòng)前：主要回答三個(gè)問題

  • 問題和目標(biāo)是什么：找到核心指標(biāo)
  • 解決問題和實(shí)現(xiàn)目標(biāo)的關(guān)鍵路徑是什么：找到過程指標(biāo)
  • 新的路徑傷害了誰：找到觀察指標(biāo)

• 項(xiàng)目開發(fā)上線：

  • 全流量上線
    如果核心/過程/觀察指標(biāo)僅與本項(xiàng)目有關(guān)，評(píng)估效果很好、希望盡快上線拿到收益時(shí)，可選擇全流量上線
    回歸方法：實(shí)驗(yàn)期間同比上個(gè)時(shí)間周期，變化了xx%
  • 小流量上線
    如果核心/過程/觀察指標(biāo)變化可能受項(xiàng)目外的因素影響，或者項(xiàng)目效果存在一定不確定性時(shí)，盡量選擇 AB test
    回歸方法：實(shí)驗(yàn)流量比基線，變化了xx%。
    注：
    抽樣方法是否足夠隨機(jī)
    樣本集合是否有天然差異。先進(jìn)行流量空跑，避免問題

3.8 【實(shí)例】搜索建議的效果回歸

策略產(chǎn)品經(jīng)理入門學(xué)習(xí)筆記：
策略PM入門學(xué)習(xí)（一）
策略PM入門學(xué)習(xí)（二）
策略PM入門學(xué)習(xí)（三）
策略PM入門學(xué)習(xí)（四）
策略PM入門學(xué)習(xí)（五）
策略PM入門學(xué)習(xí)（六）
策略PM入門學(xué)習(xí)（七）