ROAS w raporcie AI: co uzasadnia większy budżet reklamowy?

ROAS podany w raporcie marketingowym napisanym przez AI może wyglądać jak gotowe uzasadnienie zwiększenia budżetu. Sam ROAS oparty na atrybucji nie dowodzi jednak, że reklama przyniosła dodatkowy przychód. Pokazuje wartość przypisaną reklamie według określonych reguł. Nie ustala, jaka część sprzedaży nie nastąpiłaby bez reklamy, ani ile przyniosą kolejne wydatki.

Dla osoby kierującej marketingiem lub zatwierdzającej raporty agencji istotne są zatem dwie rzeczy: poprawność liczby oraz podstawa wniosku. Pierwsza nie gwarantuje drugiej. AI może przygotować komentarz z odnośnikami do źródeł i wskazać braki. Nie stworzy jednak wiarygodnego porównania z sytuacją bez reklamy tylko dlatego, że potrafi płynnie opisać dashboard.

Poprawny wynik, zbyt mocny wniosek

Rozważmy przykład całkowicie hipotetyczny, a nie wynik klienta. Miesięczny dashboard fikcyjnego sklepu pokazuje THB 100 000 wydatków na reklamę i THB 400 000 wartości zakupów przypisanej reklamom. W tym samym miesiącu trwała promocja. Nie dostarczono badania ani modelu szacującego wpływ przyczynowy kampanii.

Działanie 400 000 / 100 000 daje ROAS oparty na atrybucji równy 4,0. ROAS jest stosunkiem wartości konwersji do wydatków reklamowych. W atrybucji system przypisuje tę wartość kontaktom z reklamą zgodnie z ustawieniami pomiaru i regułami atrybucji. Taki wynik może być przydatny, ale nie rozstrzyga, które zakupy odbyłyby się również bez kampanii.

Zdanie „Reklama wygenerowała THB 400 000 dodatkowego przychodu, dlatego zwiększmy budżet” wykracza poza dostępne dane. Wersja zgodna z dostępnymi danymi brzmi: „Według dashboardu kampanii w analizowanym miesiącu platforma przypisała reklamom THB 400 000 wartości zakupów przy wydatkach THB 100 000. ROAS oparty na atrybucji wyniósł 4,0. Dostarczony raport nie określa wartości dodatkowej sprzedaży spowodowanej reklamą”.

Promocja pozostaje możliwym wyjaśnieniem do sprawdzenia, nie ustaloną przyczyną wyniku. Trzeba też zachować definicję wartości konwersji: nie zawsze oznacza ona już otrzymany przychód. ROAS nie mierzy zysku, ponieważ nie uwzględnia marży i pozostałych kosztów. Wyniku 4,0 nie należy przedstawiać jako 400% zysku.

Jakiego porównania potrzeba do oceny dodatkowej sprzedaży

Efekt inkrementalny, czyli przyrostowy, to wynik, który nie wystąpiłby bez konkretnej badanej reklamy. Jego oszacowanie wymaga wiarygodnego punktu odniesienia: tego, co wydarzyłoby się bez tej reklamy. Takie porównanie nazywa się scenariuszem kontrfaktycznym. Sam wzrost sprzedaży po rozpoczęciu kampanii nie tworzy jeszcze właściwego punktu odniesienia.

Warto rozróżnić cztery podstawy wnioskowania. Opis zmiany wskazuje, co wzrosło lub spadło między okresami. Atrybucja przypisuje wyniki zgodnie z regułami systemu. Eksperyment szacuje wpływ za pomocą odpowiednio zaplanowanego porównania grup badanej i kontrolnej. Model przyczynowy może szacować wpływ na podstawie danych obserwacyjnych, przy określonych założeniach. Komentarz modelu językowego nie jest kolejną metodą pomiaru.

Google Ads Conversion Lift korzysta z porównań kontrolowanych i oferuje badania na poziomie użytkowników lub obszarów geograficznych. Funkcja nie jest dostępna dla wszystkich kont. Potrzebny jest prawidłowy projekt i porównywalne grupy; zwykłe odjęcie ich wyników nie stanowi uniwersalnej metody. W Google Conversion Lift na poziomie użytkowników inkrementalny ROAS to oszacowana dodatkowa wartość konwersji podzielona przez wydatki reklamowe. Raport musi zachować zakres badania i podane przedziały niepewności.

Eksperyment nie jest jedyną drogą. Odpowiednio zbudowany model miksu marketingowego może szacować efekty przyczynowe z danych obserwacyjnych. Powinien uwzględniać czynniki wpływające jednocześnie na decyzje o reklamie i na sprzedaż. Sezonowość czy promocje mogą mieć znaczenie, ale trzeba to zbadać. Dokumentacja Meridian wyjaśnia, że modele o dobrej trafności prognoz mogą dawać różne oszacowania przyczynowego zwrotu. Dobre przewidywanie liczb samo nie potwierdza poprawnego wyjaśnienia ich przyczyn.

Dlaczego wyższy budżet wymaga osobnego uzasadnienia

Nawet wiarygodna ocena dotychczasowego efektu nie ustala zwrotu z dodatkowych wydatków. Średni wynik osiągnięty przy obecnym budżecie odpowiada na inne pytanie niż wynik kolejnej wydanej kwoty. W praktyce większe wydatki mogą oznaczać inne możliwości dotarcia do odbiorców i inne warunki zakupu reklamy. Przeniesienie dotychczasowego wskaźnika na przyszłość jest więc założeniem wymagającym uzasadnienia.

Meridian odróżnia historyczny ROI od marginalnego ROI, czyli szacowanego zwrotu z niewielkiego zwiększenia wydatków. Krzywe odpowiedzi modelu pokazują przewidywane wyniki dla różnych poziomów nakładów. Im dalej wychodzimy poza zaobserwowane wydatki, tym większe ryzyko takiej ekstrapolacji. Tych miar z modelu przyczynowego nie wolno utożsamiać z ROAS opartym na atrybucji platformy. Większą konkretną zmianę budżetu należy rozpatrywać jako porównanie odpowiednich scenariuszy.

Brak pełnego pomiaru nie oznacza, że firma musi wstrzymać wszystkie decyzje. Można podjąć ograniczoną decyzję biznesową przy jawnie opisanej niepewności. Osoba odpowiedzialna za budżet powinna wtedy zapisać założenia, zakres decyzji i moment ponownej oceny. Jeżeli potrzebne jest badanie, jego projekt wymaga odpowiednich kompetencji i dostępnych danych; nie musi to być funkcja Google Lift.

Karta weryfikacji do briefu raportowego

MindVerve proponuje zacząć od zaznaczenia słów, które nadają zdaniu znaczenie przyczynowe lub prognostyczne: „spowodowała”, „przyniosła dodatkowo”, „zwiększy”. Następnie przypiszmy każdemu istotnemu twierdzeniu rodzaj dowodu i osobny wpis w karcie weryfikacji. Poniższe pola można skopiować do briefu:

1. Twierdzenie i decyzja: oryginalne zdanie oraz rekomendacja budżetowa, którą ma uzasadniać.
2. Miara i definicja: oryginalna nazwa, licznik, mianownik oraz reguły przypisywania wyniku.
3. Źródło i data: raport, aktualność danych, okres, kampania, grupa odbiorców i mierzony wynik.
4. Metoda i porównanie: opis, atrybucja, eksperyment lub model przyczynowy; dla wpływu reklamy także scenariusz bez niej.
5. Ograniczenia: niepewność, założenia i brakujące informacje.
6. Odpowiedzialność i dalsze działanie: osoba sprawdzająca, dopuszczalne brzmienie wniosku i potrzebne uzupełnienia.

AI może przygotować powiązania twierdzeń ze źródłami i wskazać puste pola. Recenzent musi jednak sprawdzić oryginalne źródło oraz zatwierdzić wniosek wpływający na decyzję. Jeśli dowodu brakuje, należy o niego poprosić lub zawęzić zdanie. Sama instrukcja dla modelu ani lista kontrolna nie gwarantują trafności rekomendacji.

Co sprawdzić podczas pilotażu raportowania

Przed odbiorem rozwiązania warto uzgodnić trzy próby. To proponowane kryteria akceptacji, nie testy już wykonane ani opublikowane wyniki:

1. Dane wyłącznie z atrybucji: raport nie zmienia wartości przypisanej w dodatkowy przychód.
2. Badanie bez jednoznacznego rozstrzygnięcia: raport zachowuje niepewność i nie ogłasza pewnego braku wpływu.
3. Oszacowanie modelu przyczynowego: raport zachowuje zakres i założenia oraz nie przedstawia analizy jako eksperymentu.

Mierzcie liczbę korekt twierdzeń bez pokrycia, możliwość dotarcia od wniosku do źródła oraz łączny nakład pracy potrzebny do weryfikacji. Powinien on obejmować również czytanie źródeł. Te obserwacje pomagają ocenić cały proces, a nie tylko szybkość wygenerowania pierwszej wersji.

Usługa automatyzacji i raportowania MindVerve określa dane wejściowe, wyniki, odpowiedzialność, obliczenia, kontrole, etapy weryfikacji i reguły obsługi błędów. AI Workflow Launch wdraża jeden uzgodniony proces z testami typowych sytuacji i wyjątków, dokumentacją, szkoleniem i przekazaniem. Konfiguracja, dostępy, licencje lub użycie API, dodatkowe integracje i utrzymanie wymagają ustalenia zakresu. Wdrożenie modelu miksu marketingowego ani zaprojektowanie eksperymentu nie są automatycznie włączone do usługi.

Do rozmowy o konkretnym pilotażu przygotujcie prawdziwy zanonimizowany raport, definicje miar ze źródeł i decyzję, którą raport ma wspierać. Pozwoli to ustalić użyteczny zakres pracy i pozostawić odpowiedzialność za budżet po stronie człowieka.