Kako deluje naš crawler.
Passiro Crawler skenira spletne strani za piškotke, sledilnike in skladnost soglasja. Je spoštljiv, pregleden in enostaven za nadzor.
Identifikacija
Kako prepoznati naš crawler
Passiro Crawler se v vsaki zahtevi identificira z naslednjim User-Agent nizom:
Naš crawler lahko prepoznate tako, da v glavi User-Agent poiščete PassiroCrawler.
Kaj počne
Zgrajen za skeniranje, ne za praskanje.
Skeniranje piškotkov in sledilnikov
Vaše strani naložimo v brezglavem brskalniku in zabeležimo vsak piškotek in vsako zahtevo tretjih oseb, ki jih sprožijo, tako da lahko natančno poročamo, kateri sledilniki se izvajajo pred soglasjem in po njem.
Posnetki zaslona
Naredimo posnetke zaslona skeniranih strani in ustvarimo vizualna poročila, ki prikazujejo, kako vaša pasica za piškotke in potek soglasja izgledata obiskovalcem. Posnetki zaslona so varno shranjeni in prikazani le lastniku strani ali v javnih ocenah.
Odkrivanje povezav
Sledimo notranjim povezavam za odkrivanje strani na vašem spletnem mestu. Sledimo samo povezavam znotraj iste domene in upoštevamo največjo omejitev strani. Preverimo tudi vaš sitemap.xml, če je na voljo.
Zaznavanje
Kaj zazna preverjanje privolitve
Preverjanje soglasja naloži vsako stran v pravem brskalniku in zabeleži, kaj se zgodi, preden je podano kakršno koli soglasje. Vse, kar je prikazano na strani pregleda, je opaženo vedenje, ne domneva.
Platforma za privolitev in konfiguracija
Katera platforma za upravljanje privolitev deluje na spletnem mestu. Pri nastavitvah Cookiebot preberemo tudi ID računa in ali je omogočeno samodejno blokiranje skript.
Google Consent Mode v2
Ali so privzete nastavitve privolitve deklarirane pred nalaganjem Googlovih oznak in ali so vse vrste shrambe privzeto zavrnjene.
IAB TCF v2
Ali spletno mesto izpostavlja API Transparency and Consent Framework, ki se uporablja za programatično oglaševanje.
Piškotki, nastavljeni pred privolitvijo
Vsak piškotek, nastavljen pred kakršno koli interakcijo s pasico za privolitev, razvrščen glede na našo zbirko podatkov znanih piškotkov.
Zahteve sledilnikov
Zahteve tretjih oseb, primerjane z več kot 4.500 znanimi podpisi sledilnikov, vključno s tem, ali je vsaka zahteva nastavila piškotek.
Odstopanje izjave o piškotkih
Pri spletnih mestih s Cookiebot primerjamo objavljeno izjavo o piškotkih s piškotki, ki smo jih dejansko zaznali na spletnem mestu.
Platforme za privolitev, ki jih prepoznamo
Spletna mesta, ki uporabljajo platformo, ki je ne prepoznamo, ali sploh ne uporabljajo nobene platforme, so prijavljena kot spletna mesta, na katerih ni bila zaznana nobena platforma za upravljanje privolitev.
Vedenje crawlerja
Spoštljiv po zasnovi.
Omejitev hitrosti
Največ 2 zahtevi na sekundo. Nikoli ne preobremenimo vašega strežnika.
Crawlanje z zavedanjem predlog
Naš crawler inteligentno zaznava predloge strani. Na straneh za e-commerce s tisoči produktnih strani z enako postavitvijo samodejno identificira predlogo in se premakne na druge edinstvene tipe strani. To pomeni polno pokritost z minimalnim številom zahtev.
Brez ekstrakcije podatkov
Vaše vsebine, cen ali podatkov uporabnikov ne zajemamo in ne shranjujemo. Posnetke zaslona delamo za vizualna poročila ter analiziramo piškotke, skripte in vedenje soglasja za namene skladnosti — nič drugega.
Zaščita pred pretečenim časom
Vsaka stran ima 10-sekundno omejitev časa, celotni čas crawlanja pa je omejen na 5 minut. Nikoli ne visimo na vašem strežniku.
Samo znotraj domene
Sledimo samo povezavam znotraj domene, ki jo skeniramo. Med skeniranjem nikoli ne obiskemo zunanjih spletnih strani.
Pametno skeniranje
Vidi vašo stran tako, kot jo vidijo uporabniki.
Za natančne rezultate skeniranja in čiste posnetke zaslona naš pajek samodejno obravnava pojavna okna in prekrivne elemente, ki se pojavljajo na sodobnih spletnih straneh.
Pasice za soglasje za piškotke — samodejno sprejete na vseh večjih platformah za soglasje (Cookiebot, OneTrust, Usercentrics, Didomi in več) v vseh 24 jezikih EU.
Pojavna okna in modalna okna — prijave na novice, promocijski prekrivni sloji in drugi moteči elementi so zaznani in odstranjeni.
Prekrivni sloji ozadja — zatemnitveni sloji in celozaslonska ozadja so odstranjena, da posnetki zaslona prikazujejo dejansko vsebino strani.
Shadow DOM — prečkamo shadow DOM korenine, da najdemo in odstranimo elemente za soglasje, ki so skriti znotraj spletnih komponent.
Prilagoditev
Natančno prilagodite crawler za vašo stran.
Naše samodejno zaznavanje obravnava večino spletnih strani, vendar imajo nekatere strani lastna pojavna okna, edinstvene procese soglasja ali elemente, ki potrebujejo posebno obravnavo. Lastniki strani lahko konfigurirajo pravila crawlerja po meri v nastavitvah strani na nadzorni plošči.
Selektorji za klik
Določite CSS selektorje gumbov ali elementov, ki jih naj crawler klikne pred skeniranjem — na primer za zaprtje lastnega pojavnega okna, ki ga naše samodejno zaznavanje ne prepozna.
Selektorji za skrivanje
Prisilno skrijte določene elemente pred zajemom posnetkov zaslona. Uporabno za lepljive pasice, klepetalne pripomočke ali prekrivne elemente, ki ne sodijo v vaše poročilo o skladnosti.
Vnaprej nastavljeni piškotki
Nastavite piškotke, preden crawler naloži vaše strani — na primer piškotke za soglasje za obhod pasice za piškotke ali piškotke za A/B testiranje za skeniranje določene različice.
Ignorirane poti in omejitve strani
Izključite določene URL poti iz skeniranja in nastavite omejitev strani po meri. Uporabno, če so deli vaše strani za prijavo ali vsebujejo vsebino, ki je ni treba skenirati.
Te nastavitve so na voljo v zavihku Nastavitve vaše strani na nadzorni plošči Passiro. Spremembe začnejo veljati ob naslednjem skeniranju.
Vaša kontrola
Kako blokirati naš crawler
Če ne želite, da Passiro Crawler obišče vašo spletno stran, ga lahko blokirate z vašo datoteko robots.txt:
Blokirate lahko tudi določene poti ali odseke vaše strani. Spoštujemo vse standardne direktive robots.txt.
Lahko pa nas tudi kontaktirate in vašo domeno bomo dodali na naš izključitveni seznam.
Vprašanja o našem crawlerju?
Če imate vprašanja, pomisleke ali morate prijaviti težavo s Passiro Crawlerjem, vam z veseljem pomagamo.
Kontaktirajte nas