Testy A/B dla push & native: praktyczny framework

Dlaczego push i native wymagają dyscypliny

Ruch push i natywny jest tani za klik, ale bardzo zaszumiony per placement. Landing page, który „wygrywa" po 300 kliknięciach, często przegrywa po 3 000. Większość złych decyzji w tych verticalach wynika z zatrzymania testu zbyt wcześnie lub zmieniania kilku rzeczy naraz.

Co testować w pierwszej kolejności

Testuj zmiany o największym spodziewanym efekcie, po jednej na raz:

1. Oferta. Dwie oferty na tym samym landing page mogą różnić się EPC nawet 2–3×.
2. Kąt ataku landing page'a. Quiz kontra artykuł kontra direct — nie kolory przycisków.
3. Pre-landing. Czy w ogóle go używać i jak długi powinien być.
4. Szczegóły. Nagłówki, grafiki i call to action — gdy główne elementy są już ustalone.

Przeprowadzanie testu

W XPNSR Tracker test A/B należy do kampanii. Wybierz, co porównujesz (landing page'e, oferty lub całą ścieżkę), dodaj warianty i ustaw podział – 50/50 albo 70/30, gdy chcesz chronić sprawdzony wariant kontrolny.

• Przypisuj odwiedzających. Włącz tę opcję, żeby powracający użytkownik zawsze widział ten sam wariant – inaczej jedna osoba będzie liczona w obu.
• Trzymaj wszystko inne bez zmian. Te same GEO, źródła ruchu, stawki i harmonogram dla wszystkich wariantów przez cały czas trwania testu.
• Najpierw filtruj boty. Kliknięcia botów nigdy nie generują konwersji i rozmywają każdy wariant – uruchom anti-fraud, zanim zaczniesz analizować wyniki.

Ile danych wystarczy

Patrz na konwersje, nie na kliknięcia. Jako zasada kciuka: potrzebujesz co najmniej 100 konwersji na wariant, zanim uwierzysz w różnicę rzędu 20–30%. Mniejsze różnice wymagają znacznie więcej danych. Tracker raportuje istotność statystyczną dla każdego testu – poczekaj, aż wynik zostanie oznaczony jako istotny, zamiast oceniać CR na oko.

Po zakończeniu testu

Wyślij cały ruch do zwycięzcy, zarchiwizuj przegranego i zapisz wnioski. Następnie przetestuj kolejną rzecz z listy. Jeśli nie chcesz ręcznie zarządzać każdym splitem, optymalizator dostępny w planach Pro i wyższych automatycznie przesuwa wagi streamów w kierunku lepiej działających wariantów, a reguły automatyzacji mogą wstrzymywać warianty, które spadają poniżej progu ROI.