Wykrywanie botów dla media buyerów: wprowadzenie techniczne

Ile kosztują cię boty

Każde kliknięcie bota kosztuje cię podwójnie: raz gdy za nie płacisz, i drugi raz gdy wypacza dane, na których optymalizujesz. Placement, który wygląda na konwertujący na poziomie 0,5%, może naprawdę konwertować na 1% na ludzkim ruchu — i wycinasz go z błędnego powodu.

Rodzaje ruchu botowego

• Proste skrypty pobierają URL śledzący za pomocą biblioteki HTTP. Łatwe do wykrycia.
• Headless browsers, takie jak Puppeteer czy Playwright, uruchamiają prawdziwy silnik przeglądarki i wykonują JavaScript.
• Ruch z datacenter i proxy pochodzi z serwerów chmurowych, VPN-ów lub Tor, a nie z połączeń domowych czy mobilnych.
• Residential proxy kierują boty przez prawdziwe domowe adresy IP, co samo w sobie udaremnia sprawdzanie IP.
• Reviewerzy i crawlery sieci reklamowych i wyszukiwarek — to nie jest fraud, ale nie powinny widzieć wszystkiego.

Sygnały, które je zdradzają

IP intelligence

Zakresy datacenter (AWS, Google Cloud, Oracle, DigitalOcean i inne), znane sieci VPN i proxy oraz węzły wyjściowe Tor. Prawdziwi kupujący na połączeniach mobilnych lub domowych rzadko stamtąd pochodzą.

Fingerprinting TLS

Zanim dojdzie do wymiany jakichkolwiek danych HTTP, handshake TLS klienta ujawnia, jakim oprogramowaniem naprawdę jest. Fingerprinting JA3 i JA4 pozwala trackerowi wykryć, gdy coś podającego się za Chrome na iPhonie jest w rzeczywistości skryptem Pythona.

Zachowanie

Czas spędzony na landing page, czy odwiedzający kliknął dalej do oferty oraz jak szybko kliknięcia napływają z tego samego źródła ruchu. Ludzie są wolniejsi i mniej regularni niż automaty.

Weryfikacja crawlerów

User agent twierdzący, że to Googlebot, nic nie dowodzi. Odwrotne i bezpośrednie wyszukiwanie DNS dla danego IP — owszem.

Jak wykorzystuje je XPNSR Tracker

• Każde kliknięcie jest oceniane pod kątem IP intelligence, user agenta, fingerprintów JA3/JA4 i zachowania — a ty decydujesz, czy oznaczone kliknięcia są blokowane, czy przekierowywane.
• Listy datacenter i węzły wyjściowe Tor odświeżają się automatycznie co 6 godzin; możesz też dodawać własne blacklisty IP i listy botów.
• Cloaking kieruje zweryfikowane crawlery, reviewerów i boty na bezpieczną stronę, podczas gdy żywi odwiedzający widzą ofertę — powód jest logowany przy każdym kliknięciu.
• Clicks Log pokazuje werdykt, ISP, flagę proxy i czas na landing page dla każdego kliknięcia, dzięki czemu możesz audytować dowolne źródło ruchu.

Co możesz zrobić już dziś

1. Przefiltruj Clicks Log według źródła ruchu i sprawdź, ile kliknięć jest oznaczonych jako boty, proxy lub ruch z datacenter dla każdego placementu.
2. Wpisuj na czarną listę miejsca docelowe, które wysyłają głównie ruch z datacenter lub oznaczony jako podejrzany, i proś sieć o zwrot środków, przedstawiając log kliknięć jako dowód.
3. Porównaj współczynniki konwersji na ruchu wyłącznie ludzkim, zanim odetniesz dane miejsce docelowe.