快轉到主要內容

ab-testing

A/B Test:「偷看結果」將成為最大的錯誤
business-thinking data-science ab-testing featured python data-analytics statistics
乍看之下,只要通過統計顯著性的檢驗,就應該是有科學方法的嚴謹決策。然而,A/B Testing 最常見的問題之一,是在實驗樣本蒐集完整之前「偷看結果」。偷看結果最嚴重的下場,會讓你手中看似有統計顯著性的決策,20% 以上是錯誤的。這篇筆記將說明為何會有此問題、以及如何避免。