Tylko pełne dni. Każdy okres kończy się wczoraj. Dzisiejszy dzień jeszcze trwa, a Meta dopisuje zakupy do reklam z opóźnieniem (zwykle liczy zakup do 7 dni po kliknięciu i do 1 dnia po obejrzeniu reklamy), więc ostatnie godziny zawsze wyglądają gorzej, niż wypadną. „Dziś” to tylko podgląd - bez werdyktów i decyzji.
Z czym porównujemy. Jeden test to jeden zestaw reklam w Meta. Każdą reklamę porównujemy z resztą reklam jej zestawu - bez niej samej i tylko w dniach, w których sama się wyświetlała. Reklamy zestawu trafiają do tych samych ludzi i dzielą budżet, ale Meta nie dzieli ruchu po równo (chętniej pokazuje te, które wcześnie dobrze wypadły), więc to rozsądna reguła, a nie eksperyment naukowy.
Szansa. Liczymy, ile zakupów przypada na kliknięcia w link, i jak pewne jest, że różnica to nie przypadek. „Szansa, że najlepsza” porównuje reklamy zestawu, które mają co najmniej 200 kliknięć; reklama „prowadzi” od 90% szans.
Kiedy oceniamy. Najwcześniej po 3 pełnych dniach emisji, 200 kliknięciach i 10 zakupach - wcześniej to „Za wcześnie”. Reklamę, która mimo wielu kliknięć prawie nie sprzedaje, oceniamy, gdy w tempie reszty zestawu miałaby już 10 zakupów.
- Wygrywa: co najmniej 95% szans, że sprzedaje częściej niż reszta zestawu, 90% szans, że częściej o ponad 5%, i zwrot co najmniej 1,15× zwrotu reszty zestawu.
- Przegrywa: co najmniej 95% szans, że sprzedaje rzadziej (97,5% przy reklamach wydających ponad 1 000 zł dziennie), zwrot najwyżej 0,8× zwrotu reszty zestawu i co najmniej 10% budżetu zestawu. Gdy Meta nie zna wartości zakupów - ta sama pewność, że sprzedaje o ponad 10% rzadziej.
- Męczy się: zwrot z ostatnich 3 pełnych dni wobec 7 dni wcześniej spadł do najwyżej 75% tego, jak w tym czasie zmienił się zwrot reszty zestawu, a częstotliwość wzrosła o co najmniej 15% (albo wynosi już co najmniej 3). Potrzeba 7 dni emisji i 10 zakupów w tamtym tygodniu. Nie oceniamy tego w okolicach Black Friday, Mikołajek i Wigilii (±1 dzień) - po szczycie zwrot zawsze spada.
- Na równi: bez wyraźnej różnicy albo z różnicą za małą, by przesuwać budżet.
Kwoty w propozycjach to sprzedaż dziennie. „Proponujemy wyłączyć”: dzienne wydatki reklamy z ostatnich 3 dni razy różnica zwrotu wobec reszty zestawu - po wyłączeniu Meta wyda te pieniądze na pozostałe reklamy, więc nic się nie „oszczędza”, ale sprzedaje się więcej. „Proponujemy dołożyć budżet”: +30% budżetu reklamy, liczone z 50% różnicy zwrotu (dodatkowy budżet sprzedaje gorzej); najwyżej jedna taka propozycja na zestaw. „Proponujemy nową wersję”: sprzedaż tracona dziennie wobec tego, jak idzie reszta zestawu.
Skąd liczby. Zakupy i sprzedaż to dane Meta - jej własne przypisanie zakupów do reklam. Mogą się różnić od zamówień w sklepie.