全球對照組
使用全球對照組來指定所有用戶的比例,不接受任何活動或畫布,允許您分析您的消息傳遞工作的總體影響。
通過比較用戶的行為,那些不接收消息,您可以進一步了解你的營銷活動和畫布導致會話的隆起和自定義事件。
全球對照組是如何運作的嗎
隨著全球對照組,您可以設置所有用戶的百分比作為對照組。一旦保存,用戶不會收到任何活動或油畫。
你全球對照組應用到所有頻道,活動,和畫布,除了API活動和新聞Feed卡(不以為然的)。對照組仍將獲得API用戶活動和新聞Feed卡片。這個異常不擴展內容牌你使用卡,用戶在你的控製集團不會接受他們。
用戶隨機分配給全球對照組
釺隨機選擇的多個範圍隨機的桶數和包括用戶從這些選定的桶。如果您正在使用隨機桶編號為任何其他目的,結賬事情要小心。
數據跟蹤報告
釺措施用戶組和用戶的行為在你的樣品處理。治療你的樣本是隨機選擇的用戶不是在你的對照組,使用相同的隨機生成的桶數的方法。
創建一個全球性的對照組
步驟1:全球導航到對照組的設置
從儀表板,去觀眾>全球對照組。
如果您正在使用年長的導航,這個頁麵位於下訂婚>全球信息設置>全球對照組設置。
步驟2:將所有用戶的百分比分配給這個組
對你的組,然後單擊輸入一個百分比保存。一旦進入,釺顯示你估計有多少用戶會落入你的全球控製、治療和治療樣本。記住更多的用戶在您的工作空間中,這個估計會更準確。
用戶的數量在全球對照組自動更新初始設置後保持適當的觀眾比例當更多的用戶被添加到您的工作區。例如,如果工作區中的用戶數量的增長,用戶的數量在你的全球對照組也將增長,這樣你的對照組仍是一個常數比例的工作區觀眾。比例為指南,請參考以下最佳實踐部分。
步驟3:分配排除設置
使用標簽添加排除設置全局對照組。使用標簽的任何活動或畫布中排除設置不使用全局對照組。這些活動和畫布繼續發送給每個用戶在目標受眾,包括那些在你全球的對照組。
您可能希望添加排除設置如果你有事務性消息應該發送給每一個用戶。
第四步:保存您的對照組
在這一點上,釺生成一個隨機選擇的用戶組,占總用戶的選擇的百分比。一旦保存,所有當前活動和未來活動和畫布不再發送給用戶在這個組,除了運動或畫布包含任何排除設置標簽的。
禁用全局組
你可以禁用全球對照組的在任何時間全球對照組設置選項卡,但記住,這樣做會導致用戶在這個組立即成為合格的活動和畫布。
禁用您的對照組之前,我們建議出口CSV的用戶組,以防你需要參考它在稍後的點。一旦你禁用一個對照組,沒有辦法為釺恢複組或確定哪些用戶這個群體。
禁用你的組後,您可以保存一個新的。一旦你輸入百分比和保存它,釺生成一個新的隨機選擇的用戶組。如果你輸入相同的百分比,釺仍然生成一組新的用戶對你的控製和治療組。
出口控製小組成員
如果你想看到在全球控製哪些用戶組,你可以導出你的小組的成員通過CSV或API。
運行一個CSV導出,導航到全球對照組設置選項卡並單擊出口。出口通過API,使用/用戶/出口/ global_control_group
端點。
曆史對照組沒有保存,所以你隻能導出當前的團隊。確保出口任何必要的信息後禁用一個對照組。
報告
指全球對照組報告信息報告指標。
故障排除
當你建立全球對照組和查看報告,你可能會遇到以下錯誤:
問題 | 故障排除 |
---|---|
無法保存輸入的百分比時指定一個全球性的對照組。 | 這個問題發生如果你輸入一個非整數或整數不是1至15(包容)。 |
“釺是無法更新您的全球對照組”誤差對全球控製設置頁麵。 | 這通常表明這個頁麵的一些組成部分發生了變化,可能是因為另一個用戶采取行動釺帳戶。在這種情況下,刷新頁麵重試。 |
全球對照組報告沒有任何數據。 | 如果你訪問全球對照組報告沒有保存全球對照組,你不會看到任何數據在報告中。創建並保存一個全球性的控製組,再試一次。 |
我的轉化率是0%或我沒有看到圖顯示,盡管有超過零事件發生。 | 如果轉換的數量非常小,你的控製或治療組非常大,轉化率可能轉到0%,因此不顯示在圖。您可以驗證通過檢查事件的總數指標。你可以比較兩組使用增量的有效性提升百分比指標。 |
我的轉化率(或其他指標)發生極大的變化取決於時間我查看數據。 | 如果你查看數據在短的時間內,有可能為你的指標會每天或一周一周。我們建議您查看指標在過去的至少一個月。 |
事情要小心
重疊的隨機桶數
形成全球對照組使用隨機鬥數,因此如果您正在運行任何其他測試使用隨機的桶數段過濾器,請記住,會有一個重疊的部分你創建、對照組和全球用戶。
重複的電子郵件地址
如果兩個用戶不同的外部用戶id有相同的電子郵件地址,和其中一個用戶在對照組,另一個不是,然後電子郵件仍將發送到該電郵地址隻要抑組用戶申請一個電子郵件。當這種情況發生時,我們將這兩個用戶配置文件標記為有運動或帆布包含收到她的郵件。
全球對照組,於消息控製小組
可以有一個全球對照組同時使用campaign-specific或特殊對照組。campaign-specific或特殊對照組可以衡量一個特定的消息的影響。
用戶在全球對照組拒絕接收任何信息與標簽異常以外,如果你添加一個控製活動或帆布,釺保留部分的全球治療組接受特定的活動或畫布上。這意味著如果全球控製集團的成員沒有資格獲得一個特定的活動或畫布上,他們也將不會出現在特定的活動或帆布的對照組。
簡而言之,用戶在全球運動的對照組是過濾掉或帆布觀眾進入之前。用戶進入活動或畫布,然後分配比例的控製變量。
全球對照組部分開發人員控製台
您可能會看到多個全球控製段的額外的API標識符部分的API密鑰頁麵。這是因為每一次全球對照組啟用或禁用,形成一個新的全球對照組。這將導致多個段標記為“全球對照組”。
隻有其中一個片段是活躍的和可以查詢使用/用戶/出口/ global_control_group
端點,或者從儀表板出口。從儀表板專門出口國家,占全球對照組子分段。
測試的最佳實踐
最優控製集團大小
兩個主要的規則要記住* *:
- 你的對照組應不小於1000用戶。
- 你的對照組應該不超過10%的觀眾。
如果你有一個總小於10000的觀眾,你應該提高你的百分比來創建一組超過1000用戶;在這種情況下,您不應該增加你的比例高於15%。記住,整個工作區大小越小,越有挑戰性將運行統計上嚴格的測試。
- 時需要考慮的一些權衡思考你的對照組的大小,你需要一個明顯在你的組,這樣大量的客戶創建的任何行為分析是值得信賴的。manbetx万博全站客户端然而,對照組越大,讓你的客戶更少運動,這是一個缺點,如果你使用你的活動參與和轉換。manbetx万博全站客户端
- 理想的比例的總受眾將取決於總受眾有多大。更大的總受眾,較小的百分比。如果你有一個小觀眾,然而,你將需要一個更大的百分比為對照組。
實驗持續時間
選擇一個理想的時間
多久之前運行實驗調整控製組成員取決於你測試以及用戶的基線行為是什麼。如果你不確定,一個良好的開端是一個季度(三個月),但是你應該不會少於一個月。
確定適當的做實驗的時間長度,考慮什麼問題你希望的答案。例如,你看看在會話有區別嗎?如果是這樣,考慮有機通常用戶會話。品牌的用戶會話每天可以運行較短的實驗比品牌的用戶會話每月隻有幾次。
或者,你可能有興趣購買行為,所以你的實驗很可能需要運行超過一個實驗,你檢查會話,因為它可能是你的用戶購物的頻率更低。
時間越長你持有同樣的對照組越偏離治療組,它可以產生偏見。重置全球對照組重新平衡。
試圖限製過早結束實驗
你應該決定多長時間運行您的實驗之前,然後你應該隻結束實驗,收集最終結果一旦你達到預先確定的點。結束實驗,或者當你看到前途的數據,將引入偏見。
思考價值的指標
考慮任何基線行為指標你最感興趣的。你有興趣購買利率每年訂閱計劃,隻更新嗎?還是客戶每周manbetx万博全站客户端活動你想測量的習慣嗎?思考需要多長時間用戶可能會改變他們的行為,由於您的消息傳遞。一旦你決定你的實驗應該運行多長時間,確保沒有結束你的實驗或記錄最終結果早,或者你發現可能有偏見。