Comment fonctionne notre crawler.
Passiro Crawler analyse les sites web à la recherche de cookies, de traqueurs et de conformité du consentement. Il est respectueux, transparent et facile à contrôler.
Identification
Comment identifier notre crawler
Le Passiro Crawler s'identifie dans chaque requête avec la chaîne User-Agent suivante :
Vous pouvez identifier notre crawler en recherchant PassiroCrawler dans l'en-tête User-Agent.
Ce qu'il fait
Conçu pour analyser, pas pour extraire.
Analyse des cookies et traqueurs
Nous chargeons vos pages dans un navigateur headless et enregistrons chaque cookie et chaque requête tierce qu'elles déclenchent, afin de rapporter précisément quels traqueurs s'exécutent avant et après le consentement.
Captures d'écran
Nous prenons des captures d'écran des pages analysées pour créer des rapports visuels qui montrent comment votre bannière cookies et votre parcours de consentement apparaissent aux visiteurs. Les captures sont stockées de manière sécurisée et uniquement montrées au propriétaire du site ou dans les avis publics.
Découverte de liens
Nous suivons les liens internes pour découvrir les pages de votre site. Nous ne suivons que les liens du même domaine et respectons une limite maximale de pages. Nous vérifions également votre sitemap.xml si disponible.
Détection
Ce que détecte la vérification du consentement
La vérification du consentement charge chaque page dans un véritable navigateur et enregistre ce qui se passe avant tout consentement. Tout ce qui figure sur une page d'analyse correspond à un comportement observé, et non à une supposition.
Plateforme de consentement et configuration
Quelle plateforme de gestion du consentement s'exécute sur le site. Pour les configurations Cookiebot, nous lisons également l'identifiant du compte et si le blocage automatique des scripts est activé.
Google Consent Mode v2
Si les valeurs par défaut du consentement sont déclarées avant le chargement des balises Google, et si tous les types de stockage sont refusés par défaut.
IAB TCF v2
Indique si le site expose l'API Transparency and Consent Framework utilisée pour la publicité programmatique.
Cookies déposés avant le consentement
Chaque cookie déposé avant toute interaction avec la bannière de consentement, classé à partir de notre base de données de cookies connus.
Requêtes de traceurs
Requêtes tierces comparées à plus de 4 500 signatures de traceurs connues, y compris pour déterminer si chaque requête a déposé un cookie.
Décalage de la déclaration de cookies
Pour les sites Cookiebot, nous comparons la déclaration de cookies publiée avec les cookies que nous avons réellement observés sur le site.
Plateformes de consentement que nous reconnaissons
Les sites utilisant une plateforme que nous ne reconnaissons pas, ou aucune plateforme, sont signalés comme n'ayant aucune plateforme de gestion du consentement détectée.
Comportement du crawler
Respectueux dès la conception.
Débit limité
Maximum 2 requêtes par seconde. Nous ne surchargeons jamais votre serveur.
Crawling intelligent par template
Notre crawler détecte intelligemment les templates de pages. Sur les sites e-commerce avec des milliers de pages produit partageant le même layout, nous identifions automatiquement le template et passons aux autres types de pages uniques. Cela signifie une couverture complète avec un minimum de requêtes.
Aucune extraction de données
Nous ne scrapons ni ne stockons votre contenu, vos prix ou vos données utilisateurs. Nous prenons des captures d'écran pour les rapports visuels et analysons les cookies, les scripts et le comportement du consentement à des fins de conformité — rien d'autre.
Protection par timeout
Chaque page a un timeout de 10 secondes et le temps total de crawl est plafonné à 5 minutes. Nous ne restons jamais bloqués sur votre serveur.
Même domaine uniquement
Nous ne suivons que les liens du domaine analysé. Nous ne visitons jamais de sites web externes pendant une analyse.
Analyse intelligente
Voit votre site comme vos utilisateurs le voient.
Pour produire des résultats d'analyse précis et des captures d'écran propres, notre crawler gère automatiquement les popups et les overlays qui apparaissent sur les sites web modernes.
Bannières de consentement cookies — automatiquement acceptées sur toutes les principales plateformes de consentement (Cookiebot, OneTrust, Usercentrics, Didomi et plus) dans les 24 langues de l'UE.
Popups et modales — inscriptions à la newsletter, overlays promotionnels et autres éléments intrusifs sont détectés et fermés.
Overlays d'arrière-plan — les couches d'assombrissement et les arrière-plans plein écran sont supprimés pour que les captures d'écran montrent le contenu réel de la page.
Shadow DOM — nous traversons les shadow roots pour trouver et fermer les éléments de consentement cachés à l'intérieur des composants web.
Personnalisation
Affinez le crawler pour votre site.
Notre détection automatique gère la plupart des sites web, mais certains sites ont des popups personnalisés, des flux de consentement uniques ou des éléments nécessitant un traitement spécial. Les propriétaires de sites peuvent configurer des règles de crawler personnalisées dans le tableau de bord des paramètres du site pour gérer ces cas particuliers.
Sélecteurs de clic
Spécifiez les sélecteurs CSS des boutons ou éléments que le crawler doit cliquer avant l'analyse — par exemple, pour fermer un popup personnalisé que notre détection automatique ne reconnaît pas.
Sélecteurs de masquage
Masquez de force certains éléments avant les captures d'écran. Utile pour les bannières fixes, les widgets de chat ou les overlays qui n'ont pas leur place dans votre rapport de conformité.
Cookies prédéfinis
Définissez des cookies avant que le crawler ne charge vos pages — par exemple, un cookie de consentement pour contourner entièrement la bannière cookies, ou un cookie de test A/B pour analyser une variante spécifique.
Chemins ignorés & limites de pages
Excluez des chemins d'URL spécifiques de l'analyse et définissez une limite de pages personnalisée. Utile si des parties de votre site sont derrière une authentification ou contiennent du contenu que vous n'avez pas besoin d'analyser.
Ces paramètres sont disponibles dans l'onglet Paramètres de votre site sur le tableau de bord Passiro. Les modifications prennent effet lors de la prochaine analyse.
Votre contrôle
Comment bloquer notre crawler
Si vous ne souhaitez pas que le Passiro Crawler visite votre site web, vous pouvez le bloquer via votre fichier robots.txt :
Vous pouvez également bloquer des chemins ou sections spécifiques de votre site. Nous respectons toutes les directives standard de robots.txt.
Vous pouvez également nous contacter et nous ajouterons votre domaine à notre liste d'exclusion.
Des questions sur notre crawler ?
Si vous avez des questions, des préoccupations ou devez signaler un problème avec le Passiro Crawler, nous sommes là pour vous aider.
Contactez-nous