廣告到底有沒有多帶來生意：用地區對照與保留組做增量測試的實務流程
增量測試回答的是一個歸因報表回答不了的問題：如果沒有投這筆廣告，業績會少多少？做法是把市場或受眾切成兩組，一組照常投放、一組暫停或不投，比較兩組的結果差距。差距才是廣告真正多帶來的生意，而不是平台報表上看到的全部轉換。
對中小企業來說，增量測試聽起來像大品牌的專利，其實只要設計得當，用地區切分或名單保留組就能做。這篇整理兩種最常用的設計，以及我在執行時最常遇到的陷阱。
為什麼歸因報表不夠
歸因報表記錄的是「誰碰過這個客人」，而不是「誰讓這個客人買單」。一個本來就打算購買的熟客，在結帳前點了一下再行銷廣告，歸因報表會把功勞記給廣告，但即使沒有那則廣告，他也會買。這部分就是「非增量」轉換。
品牌關鍵字、再行銷、會員電子報，這些管道的非增量比例通常最高，因為它們接觸的本來就是高意願族群。只看歸因報表，這些管道的投資報酬率永遠漂亮，預算也就越放越多。增量測試的價值，就是把這層濾鏡拿掉。
設計一：地區對照測試
把可投放的地區分成測試區與對照區，測試區維持或增加投放，對照區暫停，比較兩區在測試期間相對於過去的變化。台灣市場規模有限，常見做法是以縣市為單位分組，但要避開台北、新北這種人口與消費力遠高於其他地區的組合被放在同一邊。
- 收集過去至少八到十二週各縣市的每日或每週業績
- 挑出歷史走勢相近的縣市配對，一邊放測試、一邊放對照
- 測試前先確認兩組的歷史走勢差距穩定
- 執行至少四週，或涵蓋一個以上完整購買週期
- 比較兩組在測試期的走勢差距與測試前的差距，差額即為增量估計
地區測試的優點是不需要平台支援，缺點是地區之間的差異很難完全控制，而且跨區移動的消費者會造成污染。若業績集中在少數地區，這個方法的精準度會受限。
設計二：保留組測試
如果你有會員名單或自訂受眾，可以隨機抽出一部分設為保留組，在測試期間完全不對他們投放特定廣告。例如從會員名單隨機抽百分之十，排除在再行銷活動之外，四週後比較兩組的購買率。
隨機是這個方法的靈魂。只要分組是隨機的，兩組之間唯一的系統性差異就是有沒有看到廣告，結果的解讀就相對乾淨。部分廣告平台也提供轉換提升研究，本質上就是平台幫你做保留組，只是門檻與可用性依平台與帳戶條件而定。
| 比較項目 | 地區對照 | 保留組 |
|---|---|---|
| 需要的條件 | 各地區業績資料 | 可隨機切分的名單或受眾 |
| 隨機程度 | 低，靠配對彌補 | 高 |
| 適合檢驗 | 整體投放或大型管道 | 再行銷、會員溝通、電子報 |
| 主要污染 | 跨區移動、地區事件 | 保留組仍被其他管道接觸 |
| 執行難度 | 中 | 低到中 |
測試期與樣本怎麼抓
測試期太短，會被偶發事件主導；太長，暫停投放的機會成本太高。我的經驗是至少四週，並且要涵蓋一個完整的決策週期。如果你的產品從首次接觸到成交平均要三週，那四週其實只剛好夠，建議拉到六週。
樣本量方面，重點是預期的增量要能被看見。如果兩組的日常波動就有正負一成，而你預期廣告只帶來百分之五的差距，那這個測試很可能得不到明確結論。這時候要嘛擴大樣本，要嘛延長時間，要嘛接受結果只能作為方向參考。
測試前要先談好的三件事
增量測試最常失敗的原因不是統計，而是組織。測試做到一半，業務主管看到對照區業績下滑，要求立刻恢復投放；或是老闆在測試期間臨時決定加碼促銷，讓整個設計失效。所以在按下開始之前，我會請決策者簽下三個承諾。
- 測試期間不因短期業績波動提前終止，除非跌幅超過事先約定的停損線
- 測試期間不在單一組別加碼促銷、改價或推新品
- 結果無論支持或推翻原本的看法，都會被寫進下一季的預算討論
第三點特別重要。很多團隊做完測試，發現最愛的管道增量很低，就找理由說測試設計有問題，然後回到原本的配置。如果結果不會被採用，就沒有必要花這個成本。事先寫下「如果增量低於多少，我們會怎麼做」，能讓測試真正變成決策工具，而不是一次昂貴的好奇心練習。
另外，建議指定一位不直接負責該管道成效的人主持測試與解讀結果。負責投放的人天然會希望結果漂亮，由第三方來看數據，能減少不自覺的選擇性解讀，也讓討論更容易聚焦在證據本身。
結果怎麼讀，常見污染怎麼排除
讀結果時，先看測試前兩組是否真的相近，再看測試期的差距是否超過平常的波動範圍。如果差距落在平常的波動範圍內，最誠實的結論是「無法證明有增量」，而不是「沒有增量」。
- 測試期間有檔期或促銷只落在某一組
- 對照區的業務或門市在同期加強推廣
- 保留組透過其他管道仍被同一訊息觸及
- 測試中途改了出價或素材，讓結果無法歸因
- 季節因素讓兩組同時大幅波動，掩蓋差距
結果出來後，把增量轉換除以測試區的花費，就得到增量單次轉換成本。拿它和平台報表上的單次轉換成本對照，差距越大，代表該管道的非增量比例越高，是預算檢討時最值得優先討論的地方。
常見問題
小預算也能做增量測試嗎？
可以，但要選擇影響力夠大的管道測試，並接受較長的測試期。預算太小的活動，增量本身就很難從日常波動中被分辨出來。
暫停對照區的廣告會不會損失太多業績？
會有機會成本，這也是測試的代價。控制方式是縮小對照區比例，或只測試單一管道，讓損失維持在可接受範圍內。
增量測試結果和歸因報表差很多，要相信哪一個？
做預算決策時，設計良好的增量測試證據力較強。歸因報表適合日常管理與找出待驗證的線索，兩者應搭配使用。
延伸閱讀：歸因視窗怎麼選、從瀏覽到成交的十四天、新客與再行銷的比例判斷。若想讓團隊的報表真正走到決策，可以參考冠誠數位行銷服務項目，或直接預約諮詢。