Tip:
Highlight text to annotate it
X
影片 5:AdWords 廣告活動實驗: 瞭解實驗結果和統計顯著性
在步驟 3「設定 AdWords 廣告活動實驗」中 我們進行實驗
接著是驗收成果
這個短片為您解說實驗期間可能產生的結果
廣告活動實驗分成控制組和實驗組 兩組都會針對
廣告活動、廣告群組和關鍵字記錄數據 提醒您 如果在任何一個分頁下
您都沒看到控制組和實驗組的個別資料列 請按一下 [區隔]
從下拉式清單選擇 [實驗] 這樣就能看到了
隨著實驗結果不斷累積 您會注意到 介面中出現了各種統計顯著性圖示
它們可以幫助您瞭解指標在實驗後 是否出現差異
所謂統計上的顯著差異 是指這些差異的發生絕非偶然
如果指標在統計上沒有顯著變化
可能表示您的實驗變更對該指標沒有影響
灰色上下箭頭圖示代表 指標在統計上沒有顯著變化
也就是說 任何差異可能只是實驗上的誤差
向上箭頭圖示代表指標在統計上顯著上升
要是把實驗變更全面實施在競價中
該指標應該就會上升
向下箭頭圖示代表指標在統計上顯著下降
要是把實驗變更全面實施在競價中
這個指標應該就會下滑
這類圖示還成三個級別 指出多大程度上結果是出於實驗改變
而不是碰巧發生
一個向上或向下箭頭代表 指標上升或下滑的可能性是 95%
換句話說 從統計數據來看 如果全面採用實驗變更
其他因素也都保持不變 那麼指標不按照箭頭方向升降的機率
只有 5%
兩個向上或向下箭頭代表 指標上升或下滑的可能性是 99%
換句話說 從統計數據來看 如果全面採用實驗變更
其他因素也都保持不變 那麼指標不按照箭頭方向升降的機率
只有 1%
三個向上或向下箭頭代表 指標上升或下滑的可能性是 99.9%
換句話說 從統計數據來看 如果全面採用實驗變更
其他因素也都保持不變 那麼指標不按照箭頭方向升降的機率
只有 0.1%
別忘了 如果您目前的實驗/控制組分配
不是 50/50 的話 (如 70/30 或 20/80)
那麼廣告活動的實驗組/控制組 比較統計數據時不是一對一的關係
舉例來說 您正在運行的實驗採 90/10 分配 要是完全沒有改動實驗的話
實驗組每獲得 100 次曝光 控制組理當會獲得 900 次
所以 如果您看到控制組獲得 900 次曝光 而實驗組獲得 400 次
這就代表曝光次數在統計上顯著增加
(因為 400 次遠多於實驗不變時的 100 次
也就是說 採用實驗變應該會使曝光次數增加)
就算 900 字面上大於 400 也是一樣
50/50 的分組方式很方便進行比較 (因為您的實驗變更如果沒有產生影響
這兩組的絕對數據應該一樣才對) 再來 許多廣告活動的流量都不夠大
您必須採用 50/50 分組 才能得到結果 因此我們建議
多數廣告客戶最好進行 50/50 實驗
除非您打算自己換算相對百分比 像是採用實驗變更後 指標的變動幅度