導(dǎo)語
本期文章向您介紹關(guān)于Google AdMob中介進(jìn)行A/B測試的原理,設(shè)置步驟和分析方案。此外,最佳做法中的4個要點(diǎn)也將幫助您更合理地實(shí)施操作流程。
AdMob中介A/B測試的
工作原理
借助A/B測試,您可以對中介組中的2個變體進(jìn)行評估,然后比較評估結(jié)果。例如您在使用現(xiàn)有中介組后,為該中介組創(chuàng)建一個變體,看看哪個中介組的效果更好。該測試會在現(xiàn)有中介組設(shè)置和變體之間同時實(shí)施,并對您的應(yīng)用進(jìn)行用戶進(jìn)行分配,以便對兩者的效果進(jìn)行對比衡量。
您可通過以下方法更改變體B中的中介組設(shè)置:
·添加或移除廣告來源,看看它們對中介組的影響
·通過更改廣告來源的人工有效每千次展示費(fèi)用值來采用不同的廣告瀑布流順序
·啟用或停用對廣告瀑布流中廣告來源的優(yōu)化
·更改向廣告來源發(fā)出廣告請求的次數(shù)
廣告請求數(shù)必須至少達(dá)到10000個,這樣AdMob才能得出測試結(jié)果。
測試案例樣圖
測試為期90天,不過您可隨時停止測試。根據(jù)測試結(jié)果,您可以決定是使用原來的中介組設(shè)置(變體A)還是使用變體(變體B)。
A/B測試開始后,您無法對變體A或變體B進(jìn)行更改,直到測試停止或結(jié)束。這有助于確保測試公平準(zhǔn)確。
設(shè)置A/B測試
請完成以下步驟來設(shè)置測試:
1.訪問https://apps.admob.com并登錄您的AdMob帳號。
2.點(diǎn)擊邊欄中的中介。
3.在要為其創(chuàng)建A/B測試的中介組旁邊,點(diǎn)擊設(shè)置A/B測試。
4.為您的測試命名。
5.設(shè)置用戶分配比例??梢允?0%、10%或1%。該比例決定著變體B所獲用戶的占比。例如,如果您將用戶分配比例設(shè)置為10%,變體A(現(xiàn)有中介組設(shè)置)將獲得您應(yīng)用90%的用戶,而變體B將獲得10%的用戶。
6.更改變體B中的廣告來源配置。您可以:
·添加或移除廣告來源,看看它們對中介組的影響
·通過更改人工有效每千次展示費(fèi)用值來改變廣告瀑布流的順序
·啟用或停用對廣告瀑布流中廣告來源的優(yōu)化
·更改向廣告來源發(fā)出廣告請求的次數(shù)
7.為保證報告的準(zhǔn)確性,在變體A和變體B中使用同一廣告來源時,建議您使用不重復(fù)的廣告單元映射。例如,使用變體A中尚未使用的映射。
·點(diǎn)擊廣告單元映射列中的修改。在大多數(shù)情況下,您可以在廣告聯(lián)盟使用的帳號中找到映射詳細(xì)信息。
·詳細(xì)了解如何添加廣告瀑布流中的廣告來源和出價廣告來源。
8.點(diǎn)擊保存。
9.點(diǎn)擊開始測試。
A/B測試開始后,您將無法對中介組(包括變體A或變體B)進(jìn)行更改,直到測試停止或結(jié)束為止。在實(shí)驗運(yùn)行期間,任何更改都可能會影響結(jié)果。即,不能在此期間修改廣告單元、地理位置定位等。
10.點(diǎn)擊確認(rèn)框中的開始,測試便會在幾分鐘內(nèi)開始。
默認(rèn)情況下,測試為期90天,不過您可以根據(jù)可用數(shù)據(jù)選擇采取措施并結(jié)束測試。
不可忽略的最佳做法
·選擇獲得了足夠流量的廣告單元進(jìn)行測試,以便確定出一個結(jié)果。測試必須先收到至少10000個廣告請求,然后AdMob才能確定出一個結(jié)果。
·一次只能更改一項設(shè)置,以便更準(zhǔn)確地將效果差異歸因于特定更改。
·測試至少運(yùn)行兩周。數(shù)據(jù)越詳盡,系統(tǒng)就越能準(zhǔn)確地評估哪個變體的效果最好。
·考慮在變體A和變體B中使用不同的映射。這有助于確保廣告瀑布流中廣告來源的測試數(shù)據(jù)和報告準(zhǔn)確無誤。
對A/B測試結(jié)果進(jìn)行分析并
采取相應(yīng)的措施
中介組頁面上的數(shù)據(jù)會定期更新。在為期90天的測試期內(nèi),您隨時可以根據(jù)相關(guān)數(shù)據(jù)結(jié)束測試并將流量分配給某個變體。將流量分配給某個變體意味著針對所有用戶將其中一個變體作為您的中介組配置。
要進(jìn)行A/B測試并監(jiān)控測試結(jié)果,請按以下步驟操作:
·訪問https://apps.admob.com并登錄您的AdMob帳號。
·點(diǎn)擊邊欄中的中介。
·選擇您要查看的A/B測試所在的中介組。
為了幫助您分析A/B測試的結(jié)果,AdMob會報告變體A和變體B按比例推算的每月收入。按比例推算的每月收入是一個估算值,表示如果您向所有用戶應(yīng)用此變體,在28天內(nèi)預(yù)計獲得的收入。這樣做可以公平進(jìn)行比較,更準(zhǔn)確地了解每個變體的效果。
在您啟動A/B測試4天,且累積10000次展示后,AdMob會開始計算按比例推算的每月收入。
在A/B測試頁面頂部查看按比例推算的每月收入差異,了解變體之間的差異大小。
您還會看到變體A和變體B的估算收入、有效每千次展示費(fèi)用和匹配率(這些數(shù)據(jù)在整個測試過程中會持續(xù)更新)。這些數(shù)據(jù)還可顯示每個廣告來源在各個變體中的效果,以便您輕松比較同一個廣告來源在兩個變體中的效果。
了解結(jié)果
測試開始后,AdMob會比較每個變體的按比例推算的每月收入,以確定哪個變體的效果更好。確定某個變體的效果始終明顯優(yōu)于另一個變體時,AdMob會在A/B測試頁面上顯示效果更好的變體。我們還會提供建議采取的措施:“保留原廣告”(變體A的效果更好時)或“應(yīng)用變體”(變體B的效果更好時)。
此外,我們還提供百分比形式的大致幾率,來表示AdMob在確定效果更好的變體方面的確定程度,例如,“變體A的效果比變體B更好的幾率為99%(估算值)”。
AdMob會根據(jù)以下條件確定效果更好的變體及百分比形式的大致幾率:
·某變體的效果優(yōu)于另一變體的持續(xù)時間如何。
·兩個變體之間的差異程度。
·可用的數(shù)據(jù)量。建議選擇流量大的廣告單元,以增加測試期間的可用數(shù)據(jù)量。請注意,廣告請求數(shù)必須至少達(dá)到10000個,這樣AdMob才能得出測試結(jié)果。
持續(xù)時間越長、效果差異越大、數(shù)據(jù)量越多,越有助于AdMob提高百分比形式的大致幾率。
如果上述任一條件未得到滿足,AdMob便無法確定哪個變體的效果更好,“A/B測試”頁面也不會顯示最終結(jié)果。不過,您仍然可以查看測試期間每個變體的各項指標(biāo)。
設(shè)置的用戶分配比例低于50%時,變體B的數(shù)據(jù)將按一定的比例計算,從而確保對數(shù)據(jù)進(jìn)行公平的比較,因為AdMob會假設(shè)變體B所獲用戶數(shù)與變體A相同,然后對其數(shù)據(jù)進(jìn)行計算。
例如,如果將變體B的用戶分配比例設(shè)置為10%,那么該變體帶來的估算收入將乘以9。這樣一來,您就可以將變體B與變體A(用戶分配比例為90%)進(jìn)行公平比較。如果變體B帶來的收入為¥10,則按比例計算后,變體B帶來的收入為¥90。
采取措施
我們建議讓測試至少持續(xù)兩周,然后再采取措施。在90天的測試期內(nèi),您隨時可以將流量分配給某個變體。將流量分配給某個變體意味著針對所有用戶將其中一個變體作為您的中介組配置。在決定將流量分配給某個變體時,請考慮兩個變體的估算收入的差距及百分比形式的大致幾率。
您可以選擇保留變體A,也可以選擇應(yīng)用變體B:
·要選擇變體A,請點(diǎn)擊保留。原來的中介組配置將保持不變。
·要選擇變體B,請點(diǎn)擊應(yīng)用。我們會將該變體的設(shè)置應(yīng)用到您的帳號。
如果您在90天測試期結(jié)束時仍未將流量分配給某個變體,系統(tǒng)會停止測試并針對所有用戶使用變體A,即使變體A并非測試效果最好的變體。
在實(shí)驗結(jié)束后到測試到期且變體B被刪除之前,您有30天的時間選擇變體。
希望以上內(nèi)容對你了解AdMob中介A/B測試功能有所幫助。