Test kontrolny (reklama): definicja i zastosowania

Test kontrolny to projekt eksperymentu, który wstrzymuje wyświetlanie reklamy lub interwencji marketingowej części Twojej publiczności – grupy kontrolnej – podczas gdy reszta odbiorców nadal ją otrzymuje, a następnie porównuje wyniki między tymi dwoma grupami, aby zmierzyć rzeczywisty wpływ interwencji. To ogólne określenie szerszej rodziny eksperymentów pomiaru przyczynowego stosowanych w reklamie, obejmujących wszystko od pełnego regionalnego wstrzymania po wąski test limitu częstotliwości.

Podstawowa mechanika#

Podziel swoją publiczność na dwie grupy, które są jak najbardziej podobne pod względem cech przewidujących Twój wskaźnik wynikowy: zachowań zakupowych, regionu, typu urządzenia, wszystkiego, co ma znaczenie dla Twojego biznesu. Jedna grupa, kontrolna, nie widzi reklam (lub zamiast nich otrzymuje komunikat publicznej służby); druga grupa widzi kampanię w normalny sposób. Po określonym czasie porównaj współczynnik konwersji, przychód lub inny testowany wskaźnik między grupami. Różnica, skorygowana o ewentualną początkową różnicę między grupami, to inkrementalny efekt interwencji.

Dlaczego platformy to wbudowują#

Większość dużych platform reklamowych z samodzielnym demand-side platform oferuje teraz pewną formę wbudowanego pomiaru liftu konwersji lub testów kontrolnych, ponieważ reklamodawcy ciągle zadawali to samo pytanie, na które ich własny pulpit conversion tracking nie mógł szczerze odpowiedzieć: czy te konwersje i tak by się zdarzyły? Pulpit pokazujący wysoką wartość ROAS raportuje powiązane konwersje, niekoniecznie te spowodowane, a jedynie prawdziwy test kontrolny rozdziela te dwie kategorie.

Gdzie testy kontrolne są używane w lejku#

Pełnokanałowy test kontrolny wstrzymuje cały sieć lub kanał dla podzbioru użytkowników lub regionów – projekt stojący za regionalnym testem liftu. Test kontrolny na poziomie kampanii wstrzymuje jedną konkretną kampanię, podczas gdy inne trwają, izolując wpływ tej kampanii od bazowego poziomu kanału. Test częstotliwościowy ogranicza liczbę wyświetleń reklamy przez użytkownika, a następnie porównuje wyniki z grupą nieograniczoną, co jest przydatne przy pomiarze creative fatigue i malejących zwrotów.

Praktyczne ograniczenia#

Przeprowadzanie testu kontrolnego oznacza celowe niepokazywanie reklam niektórym rzeczywistym, adresowalnym klientom przez czas trwania testu, co generuje rzeczywisty, krótkoterminowy koszt. To kompromis, który akceptuje każdy zespół nastawiony na inkrementalność: rezygnuje się z części krótkoterminowego zasięgu i przychodu w zamian za wiarygodną odpowiedź, czy wydatki faktycznie działają. Wielkość próby ma znaczenie. Test kontrolny wymaga wystarczającej objętości w obu grupach, aby wykryć statystycznie istotną różnicę; testowanie kanału o niskim natężeniu ruchu lub krótkiej kampanii często generuje jedynie szum przedstawiony jako wynik.

Odczytywanie wyniku prawidłowo#

Wynik zerowy, brak istotnej różnicy między grupą eksponowaną a kontrolną, jest prawdziwym odkryciem, a nie nieudanym testem. Oznacza to, że kanał, przynajmniej dla tej grupy i tego okresu, nie dodawał wartości inkrementalnej ponad to, co i tak by się wydarzyło. Zanim zdecydujesz się na skalowanie kanału na podstawie silnych zgłoszonych liczb, sprawdź, czy konkurenci w Twojej branży również prowadzą intensywne ad spend w tym obszarze, ponieważ kanał zatłoczony długotrwale działającymi kreacjami, zobacz ad longevity, jest rozsądnym wskaźnikiem, w którym testy kontrolne zazwyczaj potwierdzają rzeczywisty lift. OpenAdLibrary's ad intelligence platform lets you check that activity by network and vertical before you commit test budget.