如何去分析你的數據

  • 分析期間會有所謂的週期,週期的意思是你的線性結果會有所回歸,這是正常現象
  • 排除掉不相關行為所帶來的額外流量

分析最後的結果,選擇B方案的原因
 由他延伸出來的各種變體方案,都有著不錯的表現
 然後B方案又是裡面最好的
 而且我們的目標是提升抵達付款頁面的流量
 B方案的成效也能符合我們的目標,而不是增加抵達其它頁面的流量

測試策略 — Pruning the weaklings

它可以降低短時間測試的風險
 怎麼說呢?
 主要有兩點
  • 藉由某方案的多個變體,降低找不到正向效益關鍵的風險
  • 藉由在實驗過程中去掉那些表現不佳的變體,來降低你的成本
總結:
以 Pruning the Weaklings 為例
一開始確立好你的目標
產出一個新方案
在新方案的基礎上
提出可能對目標有正向效益的假說方案
作為變體

額外補充 — P-value 計算

額外補充 — A/B Testing Tool — vwo.com

A single golf clap? Or a long standing ovation?

By clapping more or less, you can signal to us which stories really stand out.