Kā darbojas mūsu rāpulis.
Passiro Crawler skenē vietnes, meklējot sīkdatnes, izsekotājus un piekrišanas atbilstību. Tas ir saudzīgs, pārredzams un viegli kontrolējams.
Identifikācija
Kā identificēt mūsu rāpuli
Passiro Crawler identificē sevi katrā pieprasījumā ar šādu User-Agent virkni:
Mūsu rāpuli var identificēt, meklējot PassiroCrawler User-Agent galvenē.
Ko tas dara
Veidots skenēšanai, nevis skrāpēšanai.
Sīkdatņu un izsekotāju skenēšana
Mēs ielādējam jūsu lapas headless pārlūkā un reģistrējam katru sīkdatni un trešās puses pieprasījumu, ko tās izraisa, lai varētu precīzi ziņot, kuri izsekotāji darbojas pirms un pēc piekrišanas.
Ekrānuzņēmumi
Mēs uzņemam skenēto lapu ekrānuzņēmumus, lai izveidotu vizuālus pārskatus, kas parāda, kā jūsu sīkdatņu banneris un piekrišanas plūsma izskatās apmeklētājiem. Ekrānuzņēmumi tiek glabāti droši un tiek rādīti tikai vietnes īpašniekam vai publiskajos novērtējumos.
Saišu atklāšana
Mēs sekojam iekšējām saitēm, lai atklātu jūsu vietnes lapas. Mēs sekojam tikai tā paša domēna saitēm un ievērojam maksimālo lapu ierobežojumu. Mēs arī pārbaudām jūsu sitemap.xml, ja tas ir pieejams.
Noteikšana
Ko atklāj piekrišanas pārbaude
Piekrišanas pārbaude ielādē katru lapu īstā pārlūkprogrammā un reģistrē, kas notiek pirms jebkādas piekrišanas sniegšanas. Viss, kas norādīts pārskata lapā, ir novērota rīcība, nevis pieņēmums.
Piekrišanas platforma un konfigurācija
Kura piekrišanas pārvaldības platforma darbojas vietnē. Cookiebot konfigurācijām mēs arī nolasām konta ID un to, vai ir iespējota automātiska skriptu bloķēšana.
Google Consent Mode v2
Vai piekrišanas noklusējuma iestatījumi tiek deklarēti pirms Google tagu ielādes un vai visiem krātuves veidiem pēc noklusējuma ir liegta piekļuve.
IAB TCF v2
Vai vietne atklāj Transparency and Consent Framework API, ko izmanto programmatiskajai reklāmai.
Sīkfaili, kas iestatīti pirms piekrišanas
Katra sīkdatne, kas iestatīta pirms jebkādas mijiedarbības ar piekrišanas baneri, klasificēta pēc mūsu zināmo sīkdatņu datubāzes.
Izsekotāju pieprasījumi
Trešo pušu pieprasījumi tiek salīdzināti ar vairāk nekā 4500 zināmām izsekotāju parakstu shēmām, tostarp pārbaudot, vai katrs pieprasījums iestatīja sīkdatni.
Sīkdatņu deklarācijas novirze
Cookiebot vietnēm mēs salīdzinām publicēto sīkdatņu deklarāciju ar sīkdatnēm, kuras faktiski novērojām vietnē.
Piekrišanas platformas, kuras atpazīstam
Vietnes, kas izmanto platformu, ko neatpazīstam, vai neizmanto nekādu platformu, tiek reģistrētas kā vietnes, kurās nav konstatēta piekrišanas pārvaldības platforma.
Rāpošanas uzvedība
Cieņpilns pēc konstrukcijas.
Ātruma ierobežojums
Maksimāli 2 pieprasījumi sekundē. Mēs nekad nepārplūdinām jūsu serveri.
Veidņu apzinoša rāpošana
Mūsu rāpulis inteliģenti atpazīst lapu veidnes. E-komercijas vietnēs ar tūkstošiem produktu lapu ar vienādu izkārtojumu tas automātiski identificē veidni un pāriet uz citiem unikāliem lapu tipiem. Tas nozīmē pilnu pārklājumu ar minimālu pieprasījumu skaitu.
Datu ekstrakcijas nav
Mēs neskrāpējam un neglabājam jūsu saturu, cenas vai lietotāju datus. Mēs uzņemam ekrānuzņēmumus vizuālajiem pārskatiem un analizējam sīkdatnes, skriptus un piekrišanas uzvedību atbilstības nolūkos — neko citu.
Noildzes aizsardzība
Katrai lapai ir 10 sekunžu noildze, un kopējais rāpošanas laiks ir ierobežots līdz 5 minūtēm. Mēs nekad nekarājamies pie jūsu servera.
Tikai tajā pašā domēnā
Mēs sekojam tikai skenējamā domēna saitēm. Mēs nekad skenēšanas laikā neapmeklējam ārējas vietnes.
Viedā skenēšana
Redz jūsu vietni tā, kā to redz lietotāji.
Lai iegūtu precīzus skenēšanas rezultātus un tīrus ekrānuzņēmumus, mūsu rāpulis automātiski apstrādā uznirstošos logus un pārklājumus, kas parādās mūsdienu vietnēs.
Sīkdatņu piekrišanas baneri — automātiski pieņemti visās galvenajās piekrišanas platformās (Cookiebot, OneTrust, Usercentrics, Didomi un citas) visās 24 ES valodās.
Uznirstošie logi un modālie logi — jaunumu biļetenu reģistrācijas, reklāmas pārklājumi un citi traucējoši elementi tiek atklāti un aizvērti.
Fona pārklājumi — aptumšošanas slāņi un pilnekrāna foni tiek noņemti, lai ekrānuzņēmumi parādītu faktisko lapas saturu.
Shadow DOM — mēs šķērsojam shadow DOM saknes, lai atrastu un aizvērtu piekrišanas elementus, kas ir paslēpti tīmekļa komponentu iekšienē.
Pielāgošana
Precīzi noregulējiet rāpuli savai vietnei.
Mūsu automātiskā atpazīšana apstrādā lielāko daļu vietņu, taču dažām vietnēm ir pielāgoti uznirstošie logi, unikāli piekrišanas procesi vai elementi, kam nepieciešama īpaša apstrāde. Vietņu īpašnieki var konfigurēt pielāgotas rāpošanas kārtulas vietnes iestatījumu paneelī.
Klikšķu selektori
Norādiet CSS selektorus pogām vai elementiem, uz kuriem rāpulim jānoklikšķina pirms skenēšanas — piemēram, lai aizvērtu pielāgotu uznirstošo logu, ko mūsu automātiskā atpazīšana neatpazīst.
Slēpšanas selektori
Piespiedu kārtā paslēpiet noteiktus elementus pirms ekrānuzņēmumu uzņemšanas. Noderīgi lipīgiem banneriem, tērzēšanas logrīkiem vai pārklājumiem, kam nevajadzētu parādīties jūsu atbilstības pārskatā.
Iepriekš iestatītas sīkdatnes
Iestatiet sīkdatnes pirms rāpulis ielādē jūsu lapas — piemēram, piekrišanas sīkdatni, lai apietu sīkdatņu baneri, vai A/B testa sīkdatni, lai skenētu noteiktu variantu.
Ignorētie ceļi un lapu ierobežojumi
Izslēdziet noteiktus URL ceļus no skenēšanas un iestatiet pielāgotu lapu ierobežojumu. Noderīgi, ja jūsu vietnes daļas ir aiz pieteikšanās vai satur saturu, ko nav nepieciešams skenēt.
Šie iestatījumi ir pieejami jūsu vietnes cilnē Iestatījumi Passiro paneelī. Izmaiņas stājas spēkā nākamajā skenēšanā.
Jūsu kontrole
Kā bloķēt mūsu rāpuli
Ja nevēlaties, lai Passiro Crawler apmeklētu jūsu vietni, varat to bloķēt ar savu robots.txt failu:
Varat arī bloķēt noteiktus ceļus vai jūsu vietnes sadaļas. Mēs ievērojam visas standarta robots.txt direktīvas.
Alternatīvi varat sazināties ar mums, un mēs pievienosim jūsu domēnu mūsu izslēgšanas sarakstam.
Jautājumi par mūsu rāpuli?
Ja jums ir jautājumi, bažas vai jāziņo par problēmu ar Passiro Crawler, mēs labprāt palīdzēsim.
Sazinieties ar mums