Jak działa nasz crawler.
Passiro Crawler skanuje strony internetowe pod kątem plików cookie, trackerów i zgodności zgody z przepisami. Jest szanujący, przejrzysty i łatwy do kontrolowania.
Identyfikacja
Jak rozpoznać naszego crawlera
Passiro Crawler identyfikuje się w każdym żądaniu następującym ciągiem User-Agent:
Możesz rozpoznać naszego crawlera szukając PassiroCrawler w nagłówku User-Agent.
Co robi
Stworzony do skanowania, nie do scrapowania.
Skanowanie plików cookie i trackerów
Ładujemy Twoje strony w przeglądarce headless i rejestrujemy każdy plik cookie oraz każde żądanie do stron trzecich, które wywołują, dzięki czemu możemy dokładnie raportować, które trackery działają przed zgodą i po niej.
Zrzuty ekranu
Robimy zrzuty ekranu skanowanych stron, aby tworzyć raporty wizualne pokazujące, jak Twój baner cookie i przepływ zgody wyglądają dla odwiedzających. Zrzuty ekranu są przechowywane bezpiecznie i pokazywane tylko właścicielowi strony lub w publicznych recenzjach.
Odkrywanie linków
Podążamy za wewnętrznymi linkami, aby odkrywać strony na Twojej witrynie. Podążamy tylko za linkami w obrębie tej samej domeny i przestrzegamy maksymalnego limitu stron. Sprawdzamy również Twoją sitemap.xml, jeśli jest dostępna.
Wykrywanie
Co wykrywa sprawdzanie zgody
Kontrola zgód ładuje każdą stronę w prawdziwej przeglądarce i rejestruje, co dzieje się przed wyrażeniem jakiejkolwiek zgody. Wszystko, co jest przedstawione na stronie przeglądu, to zaobserwowane zachowanie, a nie założenie.
Platforma zgód i konfiguracja
Jaka platforma zarządzania zgodami działa w witrynie. W konfiguracjach Cookiebot odczytujemy również identyfikator konta oraz to, czy włączone jest automatyczne blokowanie skryptów.
Google Consent Mode v2
Czy domyślne ustawienia zgody są zadeklarowane przed załadowaniem tagów Google oraz czy wszystkie typy przechowywania są domyślnie odrzucone.
IAB TCF v2
Czy witryna udostępnia interfejs API Transparency and Consent Framework wykorzystywany w reklamie programatycznej.
Pliki cookie ustawione przed wyrażeniem zgody
Każdy plik cookie ustawiony przed jakąkolwiek interakcją z banerem zgody, sklasyfikowany na podstawie naszej bazy znanych plików cookie.
Żądania trackerów
Żądania stron trzecich porównywane z ponad 4500 znanymi sygnaturami trackerów, w tym sprawdzenie, czy każde żądanie ustawiło plik cookie.
Rozbieżność deklaracji plików cookie
W przypadku witryn Cookiebot porównujemy opublikowaną deklarację plików cookie z plikami cookie, które faktycznie wykryliśmy w witrynie.
Rozpoznawane przez nas platformy zgód
Witryny korzystające z platformy, której nie rozpoznajemy, lub niekorzystające z żadnej platformy, są zgłaszane jako witryny, w których nie wykryto platformy do zarządzania zgodami.
Zachowanie crawlera
Szanujący od podstaw.
Ograniczenie szybkości
Maksymalnie 2 żądania na sekundę. Nigdy nie zalewamy Twojego serwera.
Crawlowanie z rozpoznawaniem szablonów
Nasz crawler inteligentnie rozpoznaje szablony stron. Na stronach e-commerce z tysiącami stron produktów o tym samym układzie automatycznie identyfikujemy szablon i przechodzimy do innych unikalnych typów stron. Oznacza to pełne pokrycie przy minimalnej liczbie żądań.
Brak ekstrakcji danych
Nie scrapujemy ani nie przechowujemy Twoich treści, cen ani danych użytkowników. Robimy zrzuty ekranu do raportów wizualnych i analizujemy pliki cookie, skrypty oraz zachowanie zgody pod kątem zgodności z przepisami — nic więcej.
Ochrona przed timeoutem
Każda strona ma limit czasowy 10 sekund, a łączny czas crawlowania jest ograniczony do 5 minut. Nigdy nie zawieszamy się na Twoim serwerze.
Tylko ta sama domena
Podążamy tylko za linkami w obrębie skanowanej domeny. Nigdy nie odwiedzamy zewnętrznych stron podczas skanowania.
Inteligentne skanowanie
Widzi Twoją stronę tak, jak użytkownicy.
Aby uzyskać dokładne wyniki skanowania i czyste zrzuty ekranu, nasz crawler automatycznie obsługuje wyskakujące okna i nakładki pojawiające się na współczesnych stronach.
Bannery zgody na cookies — automatycznie akceptowane dla wszystkich głównych platform zgody (Cookiebot, OneTrust, Usercentrics, Didomi i innych) we wszystkich 24 językach UE.
Wyskakujące okna i modale — zapisy na newsletter, nakładki promocyjne i inne przeszkadzające elementy są wykrywane i zamykane.
Nakładki tła — warstwy przyciemniające i nakładki pełnoekranowe są usuwane, aby zrzuty ekranu pokazywały rzeczywistą treść strony.
Shadow DOM — przeszukujemy shadow roots, aby znaleźć i zamknąć elementy zgody ukryte wewnątrz komponentów webowych.
Personalizacja
Dostosuj crawlera do swojej strony.
Nasze automatyczne wykrywanie obsługuje większość stron, ale niektóre witryny mają niestandardowe wyskakujące okna, unikalne przepływy zgody lub elementy wymagające specjalnego traktowania. Właściciele stron mogą konfigurować niestandardowe reguły crawlera w ustawieniach strony, aby obsłużyć te przypadki szczególne.
Selektory do klikania
Określ selektory CSS przycisków lub elementów, które crawler powinien kliknąć przed skanowaniem — na przykład, aby zamknąć niestandardowe wyskakujące okno, którego nasze automatyczne wykrywanie nie rozpoznaje.
Selektory do ukrywania
Wymuś ukrycie określonych elementów przed wykonaniem zrzutów ekranu. Przydatne dla przyklejonych banerów, widgetów czatu lub nakładek, które nie powinny pojawiać się w Twoim raporcie zgodności.
Wstępnie ustawione pliki cookie
Ustaw pliki cookie zanim crawler załaduje Twoje strony — na przykład plik cookie zgody, aby pominąć baner cookie całkowicie, lub plik cookie testu A/B, aby skanować konkretny wariant.
Ignorowane ścieżki i limity stron
Wyklucz określone ścieżki URL ze skanowania i ustaw niestandardowy limit stron. Przydatne, jeśli części Twojej strony są za logowaniem lub zawierają treści, które nie wymagają skanowania.
Te ustawienia są dostępne w zakładce Ustawienia Twojej strony na panelu Passiro. Zmiany zaczną obowiązywać przy następnym skanowaniu.
Twoja kontrola
Jak zablokować naszego crawlera
Jeśli nie chcesz, aby Passiro Crawler odwiedzał Twoją stronę, możesz go zablokować za pomocą pliku robots.txt:
Możesz również zablokować określone ścieżki lub sekcje swojej strony. Respektujemy wszystkie standardowe dyrektywy robots.txt.
Alternatywnie możesz skontaktować się z nami, a dodamy Twoją domenę do naszej listy wykluczeń.
Pytania dotyczące naszego crawlera?
Jeśli masz pytania, wątpliwości lub chcesz zgłosić problem z Passiro Crawler, chętnie pomożemy.
Skontaktuj się z nami