Jak náš crawler funguje.
Passiro Crawler skenuje weby na cookies, trackery a soulad souhlasu s předpisy. Je ohleduplný, transparentní a snadno ovladatelný.
Identifikace
Jak identifikovat náš crawler
Passiro Crawler se identifikuje v každém požadavku následujícím řetězcem User-Agent:
Náš crawler můžete identifikovat hledáním PassiroCrawler v hlavičce User-Agent.
Co dělá
Vytvořen pro skenování, ne pro scraping.
Skenování cookies a trackerů
Načítáme vaše stránky v headless prohlížeči a zaznamenáváme každý cookie a každý požadavek na třetí stranu, který spustí, takže můžeme přesně reportovat, které trackery běží před souhlasem a po něm.
Snímky obrazovky
Pořizujeme snímky obrazovky skenovaných stránek pro tvorbu vizuálních reportů, které ukazují, jak váš cookie baner a proces souhlasu vidí návštěvníci. Snímky obrazovky jsou uloženy bezpečně a zobrazují se pouze vlastníkovi webu nebo ve veřejných recenzích.
Objevování odkazů
Sledujeme interní odkazy k objevování stránek na vašem webu. Sledujeme pouze odkazy v rámci stejné domény a respektujeme maximální limit stránek. Kontrolujeme také váš sitemap.xml, pokud je k dispozici.
Detekce
Co kontrola souhlasu odhalí
Kontrola souhlasu načte každou stránku ve skutečném prohlížeči a zaznamená, co se děje před udělením jakéhokoli souhlasu. Vše, co je uvedeno na stránce kontroly, je pozorované chování, nikoli domněnka.
Platforma souhlasu a konfigurace
Jaká platforma pro správu souhlasu na webu běží. U nastavení Cookiebot také čteme ID účtu a zda je povoleno automatické blokování skriptů.
Google Consent Mode v2
Zda jsou výchozí hodnoty souhlasu deklarovány před načtením značek Google a zda jsou všechny typy úložiště ve výchozím nastavení odmítnuty.
IAB TCF v2
Zda web zpřístupňuje API Transparency and Consent Framework používané pro programatickou reklamu.
Soubory cookie nastavené před souhlasem
Každý soubor cookie nastavený před jakoukoli interakcí s banerem souhlasu, klasifikovaný podle naší databáze známých souborů cookie.
Požadavky sledovačů
Požadavky třetích stran porovnané s více než 4 500 známými signaturami trackerů, včetně toho, zda každý požadavek nastavil cookie.
Odchylka prohlášení o cookies
U webů využívajících Cookiebot porovnáváme zveřejněné prohlášení o souborech cookie se soubory cookie, které jsme na webu skutečně zaznamenali.
Platformy pro správu souhlasu, které rozpoznáváme
Weby, které používají platformu, kterou nerozpoznáváme, nebo žádnou platformu, jsou hlášeny jako weby bez zjištěné platformy pro správu souhlasu.
Chování crawleru
Respektující od základu.
Omezení rychlosti
Maximálně 2 požadavky za sekundu. Nikdy nezahltíme váš server.
Crawling s rozpoznáním šablon
Náš crawler inteligentně rozpoznává šablony stránek. Na e-shopech s tisíci produktových stránek se stejným rozložením automaticky identifikujeme šablonu a přejdeme k dalším unikátním typům stránek. To znamená plné pokrytí s minimem požadavků.
Žádná extrakce dat
Nescrapujeme ani neukládáme váš obsah, ceny ani uživatelská data. Pořizujeme snímky obrazovky pro vizuální reporty a analyzujeme cookies, skripty a chování souhlasu z hlediska souladu — nic jiného.
Ochrana časovým limitem
Každá stránka má časový limit 10 sekund a celkový čas crawlování je omezen na 5 minut. Nikdy se nezasekáváme na vašem serveru.
Pouze stejná doména
Sledujeme pouze odkazy v rámci skenované domény. Nikdy nenavštěvujeme externí weby během skenování.
Chytré skenování
Vidí váš web tak, jak ho vidí uživatelé.
Aby náš crawler poskytl přesné výsledky skenování a čisté snímky obrazovky, automaticky řeší vyskakovací okna a překryvy, které se objevují na moderních webech.
Bannery souhlasu s cookies — automaticky přijímány na všech hlavních platformách pro souhlas (Cookiebot, OneTrust, Usercentrics, Didomi a další) ve všech 24 jazycích EU.
Vyskakovací okna a modály — registrace k odběru novinek, propagační překryvy a další rušivé prvky jsou detekovány a zavřeny.
Překryvy pozadí — ztmavující vrstvy a celoobrazovkové překryvy pozadí jsou odstraněny, aby snímky ukazovaly skutečný obsah stránky.
Shadow DOM — procházíme shadow roots, abychom našli a zavřeli prvky souhlasu skryté uvnitř webových komponent.
Přizpůsobení
Přizpůsobte crawler pro svůj web.
Naše automatická detekce zvládne většinu webů, ale některé mají vlastní vyskakovací okna, unikátní toky souhlasu nebo prvky, které vyžadují speciální zacházení. Majitelé webů mohou konfigurovat vlastní pravidla crawleru v nastavení webu pro řešení těchto speciálních případů.
Selektory pro klikání
Zadejte CSS selektory tlačítek nebo prvků, na které by crawler měl kliknout před skenováním — například k zavření vlastního vyskakovacího okna, které naše automatická detekce nerozpozná.
Selektory pro skrytí
Vynuťte skrytí konkrétních prvků před pořízením snímků obrazovky. Užitečné pro přilepené banery, chatovací widgety nebo překryvy, které by se neměly objevit ve vašem reportu souladu.
Přednastavené cookies
Nastavte cookies předtím, než crawler načte vaše stránky — například souhlas s cookies pro úplné přeskočení banneru, nebo A/B testovací cookie pro skenování konkrétní varianty.
Ignorované cesty a limity stránek
Vyloučte konkrétní URL cesty ze skenování a nastavte vlastní limit stránek. Užitečné, pokud části vašeho webu jsou za přihlášením nebo obsahují obsah, který nepotřebuje skenování.
Tato nastavení jsou k dispozici na záložce Nastavení vašeho webu v Passiro nástěnce. Změny se projeví při dalším skenování.
Vaše kontrola
Jak zablokovat náš crawler
Pokud nechcete, aby Passiro Crawler navštěvoval váš web, můžete ho zablokovat pomocí souboru robots.txt:
Můžete také zablokovat konkrétní cesty nebo sekce vašeho webu. Respektujeme všechny standardní direktivy robots.txt.
Případně nás můžete kontaktovat a my přidáme vaší doménu na náš seznam vyloučení.
Dotazy k našemu crawleru?
Pokud máte dotazy, obavy nebo potřebujete nahlásit problém s Passiro Crawlerem, rádi vám pomůžeme.
Kontaktujte nás