什麼是A/B 測試? A/B Testing 介紹 -- Website Optimization 入門

談到Digital Banking、Digital Marketing，有不少人會立刻聯想到Public Website 、Mobile、Facebook、WeChat 等網上平台。現今互聯網普及，不少企業都希望透過這些人人都接觸到的網上平台進行宣傳和營銷。有見及此，市場上衍生出不少Searching Engine Optimization 、Website/Mobile Platform Optimization 等工作，並希望透過改善網頁/ 版面的設計和用字，令用戶更容易搜索到自己公司的平台，同時增加顧客的Click Through Rate，增加產品的銷量。

而下文則會介紹A/B Testing 的作用，並介紹A/B Testing 會為企業帶來什麼的好處。

Introduction of A/B Testing (Adobe Target Use Case 文章即將提出)

什麼是A/B Testing?

每當開會時，營銷團隊都會討論不同優化設計的主意。團員都希望自己的意見能夠被採納，但要證明自己的意見的價值，就必須用精確的科學手法測試各種設計的成效，而非只憑直覺推斷。這時候，運用A/B測試(A/B Testing)就可以解決會議室裡的困局。

A/B Testing重點在於比較兩件物件(A與B) 的表現。簡單來說:

A/B Testing 是運用統計學的假設檢定(Hypothesis Testing) ，將兩個變量(Control vs. Variant) 進行測試比較，以研究出哪一個變量效果更好。

舉一個簡單例子:

• 情景: 團隊想測試使用紅色按鈕還是藍色按鈕更能吸引顧客購買產品
• A/B 測試: Version A Website(紅色按鈕) vs. Version B Website(藍色按鈕)
• 主要成功指標 (Primary successful metrics): 按鈕點擊率(Click Through Rate)

透過設計以上的測試，團隊就能知道哪個顏色按鈕更能吸引顧客。而在測試推出後，團隊就能得到以下數據並得到結論:

• 測試時間: 5月1日 — 5月30日 (30日)
• 網站流量: 525 (Version A) vs. 572 (Version B)
• 按鈕點擊率(Click Through Rate): 30% (Version A) vs. 35% (Version B)
• 結論: 藍色按鈕能提升點擊率 16% @ Confidence level 95%