創造的可能是你的科學展覽的日子早已遠去的假設和測試實驗自變量對因變量的影響,相對於對照組的結果。

除了夜以繼日,營銷是什麼。

最令人興奮的部分營銷實驗?嚐試一些全新的東西作為一個公司,像推出了新的通訊渠道,一個新的外觀和感覺,或一個新的風格和語氣,可一樣可怕的令人振奮的。承擔這項任務,這是一個好主意有對照組的用戶不接受這些新活動,這樣你就可以比較關鍵的結果之間的組織接收新活動和組織,隻能看到你的常規營銷傳播。

你應該尋找什麼?當你建立測試組和對照組進行比較,尋找具體的差異轉換你運動的跟蹤,以及直達保留。這將幫助您了解什麼是工作,什麼不是,讓你徹底和彙報你的進展和實施步驟。

為什麼一個對照組是一個好主意嗎

使用對照組揭示了營銷的結果在兩個獨特的和有用的方法:提供見解和上下文你的運動和運動變量是如何影響用戶的行為,如果;和給你英特爾可以幫助限製轉移消息傳遞,特別是減少活動,不可能推針細看。這尤其重要,因為你的客戶很有可能manbetx万博全站客户端營銷信息泛濫在從不同的渠道營銷人員競爭。

圖片這個場景:你發送一個活動(沒有對照組)注意運動所引起的高轉化率。你的第一反應可能是認為某些方麵的活動,無論是消息副本,形象,交付,或節奏,正在推動這種KPI增加。現在想象你發送相同的運動對照組:這段時間你可能會看到,對照組和組織,認為這個活動有類似的轉化率。在這個場景中,外賣是用戶行為一樣不管發送新賽季。

如何細分適當

你段應該足夠大來表示統計顯著性和代表觀眾的你想要的見解。如果你與一小群運行測試,你可能會發現,100%的一段用戶行為的方式支持你的假設,但如果這段隻有10個用戶組成的,這些可能不是你可以信任的結果。

• 確保你的受眾細分目標相同的特點,為控製和變體,所以你比較兩組實際具有可比性。對照組(例如,沒有你都30多歲的男性,和您的測試都是50多歲的女性)。
• 專注於一個變量,你想測試。如果你在設計你的測試活動與太多的變異,你會得到從對比測試的數據控製將是可行的和可靠的。
• 給你足夠的時間來運行測試,最好是至少一個星期,控製變化引起的不同的日子。一般來說,較長的測試周期更好的控製外部因素,如天的星期,季節和節日。此外,一個測試運行的時間越長,你就越有可能產生統計上顯著的結果。
• 如果生成轉換為你的類別的應用程序通常需要更長的時間(如超市購物應用程序,用戶傾向於更新他們的飯菜一周一次),然後運行測試更長一段時間是有意義的。

跡象進一步測試是必要的

所有的測試有可能產生一些不確定性,但這裏有一些你可能需要額外的測試指標:

• 當你注意到你的測試和控製組織之間的顯著差異,而自動改變行為歸因於你的活動,首先做一個檢查,以確保結果是上下文相關的。總有一個機會,外部因素是影響您的測試;一個好的實踐是第一次有一個假設,你製定基於邏輯的猜測你的活動將如何執行。
• 如果結果為對照組和變體是相似的,你可能需要回到繪圖板。
• 如果對照組的轉化率較低,但會導致更高的保留利率,或其他不同的變化重要的kpi,你可能需要調整你的變異產生更高的轉換和更高的保留。

當一個對照組可能是不必要的

很有可能,如果你改變你的策略,你應該使用一個對照組來引導你。即使選擇部分,說低至5 - 10%的總體受眾,值得擁有確認基線假設:你的活動/消息將從用戶驅動不同的行為比用戶不接受。那就是說,如果你絕對要每個觀眾都有機會看到相同的活動或市場變化,這可能是一個理由不使用對照組。但是,你總是可以選擇發送營銷信息對照組實驗完成後。

在真正緊急的和及時的情況下,如突發新聞或行動呼籲所有用戶更新應用程序,需要所有用戶查看通知可能是更重要的比發現一個測試組將如何反應。

準備好測試更上一層樓?

探討閱讀我們的導遊A / B或多元測試:當使用。