Come funziona il nostro crawler.
Passiro Crawler scansiona i siti web alla ricerca di cookie, tracker e conformità del consenso. È rispettoso, trasparente e facile da controllare.
Identificazione
Come identificare il nostro crawler
Il Passiro Crawler si identifica in ogni richiesta con la seguente stringa User-Agent:
Puoi identificare il nostro crawler cercando PassiroCrawler nell'header User-Agent.
Cosa fa
Costruito per scansionare, non per estrarre dati.
Scansione di cookie e tracker
Carichiamo le tue pagine in un browser headless e registriamo ogni cookie e ogni richiesta di terze parti che attivano, così possiamo riportare esattamente quali tracker vengono eseguiti prima e dopo il consenso.
Screenshot
Facciamo screenshot delle pagine scansionate per creare report visivi che mostrano come il tuo banner dei cookie e il flusso di consenso appaiono ai visitatori. Gli screenshot sono archiviati in modo sicuro e mostrati solo al proprietario del sito o nelle recensioni pubbliche.
Scoperta dei link
Seguiamo i link interni per scoprire le pagine del tuo sito. Seguiamo solo i link all'interno dello stesso dominio e rispettiamo un limite massimo di pagine. Controlliamo anche il tuo sitemap.xml se disponibile.
Rilevamento
Cosa rileva il controllo del consenso
Il controllo del consenso carica ogni pagina in un browser reale e registra ciò che accade prima che venga fornito qualsiasi consenso. Tutto ciò che viene riportato in una pagina di revisione è un comportamento osservato, non un'ipotesi.
Piattaforma di consenso e configurazione
Quale piattaforma di gestione del consenso è in esecuzione sul sito. Per le configurazioni Cookiebot leggiamo anche l'ID dell'account e se il blocco automatico degli script è abilitato.
Google Consent Mode v2
Se le impostazioni predefinite del consenso vengono dichiarate prima del caricamento dei tag Google e se tutti i tipi di archiviazione sono impostati su rifiutato per impostazione predefinita.
IAB TCF v2
Se il sito espone l'API Transparency and Consent Framework utilizzata per la pubblicità programmatica.
Cookie impostati prima del consenso
Ogni cookie impostato prima di qualsiasi interazione con il banner di consenso, classificato in base al nostro database di cookie noti.
Richieste dei tracker
Richieste di terze parti confrontate con oltre 4.500 firme di tracker note, incluso se ogni richiesta ha impostato un cookie.
Scostamento della dichiarazione sui cookie
Per i siti Cookiebot, confrontiamo la dichiarazione dei cookie pubblicata con i cookie effettivamente rilevati sul sito.
Piattaforme di consenso che riconosciamo
I siti che utilizzano una piattaforma che non riconosciamo, o che non ne utilizzano alcuna, vengono segnalati come privi di piattaforma di gestione del consenso rilevata.
Comportamento del crawler
Rispettoso fin dalla progettazione.
Velocità limitata
Massimo 2 richieste al secondo. Non sovraccarichiamo mai il tuo server.
Crawling intelligente per template
Il nostro crawler rileva in modo intelligente i template delle pagine. Sui siti e-commerce con migliaia di pagine prodotto che condividono lo stesso layout, identifichiamo automaticamente il template e passiamo ad altri tipi di pagina unici. Questo significa copertura completa con richieste minime.
Nessuna estrazione di dati
Non estraiamo né archiviamo i tuoi contenuti, prezzi o dati degli utenti. Facciamo screenshot per i report visivi e analizziamo cookie, script e comportamento del consenso ai fini della conformità — nient'altro.
Protezione timeout
Ogni pagina ha un timeout di 10 secondi e il tempo totale di crawl è limitato a 5 minuti. Non rimaniamo mai bloccati sul tuo server.
Solo lo stesso dominio
Seguiamo solo i link all'interno del dominio scansionato. Non visitiamo mai siti web esterni durante una scansione.
Scansione intelligente
Vede il tuo sito come lo vedono i tuoi utenti.
Per produrre risultati di scansione accurati e screenshot puliti, il nostro crawler gestisce automaticamente i popup e gli overlay che compaiono sui siti web moderni.
Banner di consenso cookie — accettati automaticamente su tutte le principali piattaforme di consenso (Cookiebot, OneTrust, Usercentrics, Didomi e altre) in tutte le 24 lingue dell'UE.
Popup e modali — iscrizioni alla newsletter, overlay promozionali e altri elementi intrusivi vengono rilevati e chiusi.
Overlay di sfondo — livelli di oscuramento e sfondi a schermo intero vengono rimossi affinché gli screenshot mostrino il contenuto effettivo della pagina.
Shadow DOM — esploriamo le shadow root per trovare e chiudere elementi di consenso nascosti all'interno di componenti web.
Personalizzazione
Personalizza il crawler per il tuo sito.
Il nostro rilevamento automatico gestisce la maggior parte dei siti web, ma alcuni siti hanno popup personalizzati, flussi di consenso unici o elementi che richiedono un trattamento speciale. I proprietari dei siti possono configurare regole personalizzate del crawler nella dashboard delle impostazioni del sito per gestire questi casi particolari.
Selettori di clic
Specifica i selettori CSS di pulsanti o elementi su cui il crawler deve fare clic prima della scansione — ad esempio, per chiudere un popup personalizzato che il nostro rilevamento automatico non riconosce.
Selettori di nascondimento
Nascondi forzatamente elementi specifici prima degli screenshot. Utile per banner fissi, widget di chat o overlay che non dovrebbero comparire nel tuo report di conformità.
Cookie preimpostati
Imposta cookie prima che il crawler carichi le tue pagine — ad esempio, un cookie di consenso per aggirare completamente il banner dei cookie, o un cookie di test A/B per scansionare una variante specifica.
Percorsi ignorati e limiti di pagina
Escludi percorsi URL specifici dalla scansione e imposta un limite di pagine personalizzato. Utile se parti del tuo sito sono dietro login o contengono contenuti che non hai bisogno di scansionare.
Queste impostazioni sono disponibili nella scheda Impostazioni del tuo sito sulla dashboard di Passiro. Le modifiche diventano effettive alla scansione successiva.
Il tuo controllo
Come bloccare il nostro crawler
Se non desideri che il Passiro Crawler visiti il tuo sito web, puoi bloccarlo tramite il tuo file robots.txt:
Puoi anche bloccare percorsi o sezioni specifiche del tuo sito. Rispettiamo tutte le direttive standard di robots.txt.
In alternativa, puoi contattarci e aggiungeremo il tuo dominio alla nostra lista di esclusione.
Domande sul nostro crawler?
Se hai domande, dubbi o devi segnalare un problema con il Passiro Crawler, siamo felici di aiutarti.
Contattaci