Day 196數據分析行銷電商
A/B 測試結果解讀器｜兩版差 3%，到底算不算贏
💡 功能亮點
🔒
需要 100 積分解鎖
登入後即可使用積分解鎖
功能說明
兩個版本跑完，A 版轉換 3.2%、B 版 3.5%，你盯著這兩個數字看很久，不知道該不該換。換了怕是運氣，不換又怕錯過。大部分人最後都是憑感覺決定，然後把結果寫成一份看起來很科學的報告。
這工具解什麼痛：把「差這一點到底算不算贏」變成一個有信心水準的答案。
先告訴你資料夠不夠：輸入兩版的曝光數與轉換數，它先算樣本量夠不夠。很多測試其實根本還沒到可以下結論的程度，這一關就會擋下來，省得你拿雜訊當結果。
給信心水準而不是只給勝負：算出這個差距有多少機率不是運氣造成的，並標示落在 90%、95% 還是根本不顯著，讓你知道這個結論有多硬。
換算成錢：把轉換率差距乘上你的流量與客單價，直接告訴你全面採用 B 版一個月大概多賺多少，這樣才知道值不值得為它改版。
測試最貴的不是流量，是把運氣當成洞察，然後照著錯的結論改版三個月。
❓ 常見問題
我要準備哪些數字？▼
每一版的曝光數（或造訪數）與轉換數就夠了。如果還知道客單價，它可以順便幫你把轉換率差距換算成實際的營收影響，判斷值不值得為它改版。
它說不顯著，代表 B 版比較差嗎？▼
不是，代表目前的資料量還分不出高下。這時候有兩個選擇：繼續跑到樣本足夠，或是承認這個改動影響太小、把力氣花在更大的變動上。不顯著本身就是有用的資訊。
為什麼要先看樣本量？▼
因為小樣本的波動很大。一天幾十個轉換就宣布勝負，很可能只是抓到一段運氣好的時段。先確認樣本足夠，結論才站得住。
使用心得
尚無心得，成為第一個分享的人吧！
🎓
