Så genomsöker Silktide webbplatser

Silktide genomsöker inte webbplatser som en traditionell bot som bara läser HTML. Tjänsten läser in varje sida i en riktig webbläsare – huvudlösa Chrome – och ser därför ungefär det som en person ser efter att skript har körts, layouter har flödat om och resurser har lästs in.

Det är därför Silktide kan testa moderna, JavaScript-tunga webbplatser som genomsökare som bara läser källan missar, och varför resultaten kan innehålla layout, kontrast, skärmbilder och den slutliga HTML-koden efter att sidan har stabiliserats.

Vad en genomsökning gör

En typisk testkörning:

Börjar på webbplatsens startsida (och eventuella tvingade sidor som du har konfigurerat).
Läser in varje sida som ingår i omfånget i webbläsaren på dator och, när det är aktiverat, mobil.
Upptäcker fler URL:er från länkar och ofta från webbplatskartor.
Fortsätter tills allt inom omfånget har täckts eller webbplatsens har nåtts.

Du styr vilka URL:er som ingår i omfånget med Vad vi testar. Avancerade inställningar för genomsökaren ändrar hur aggressivt Silktide upptäcker och läser in dessa URL:er – se Läsa in en sida.

Sidor jämfört med filer

Allt som Silktide hittar läses inte in på samma sätt:

HTML-sidor öppnas i webbläsaren. JavaScript körs, sidan kan rullas och Silktide kan klicka på en konfigurerad kontroll (till exempel för att stänga en cookie-banner) innan resultaten samlas in.
PDF-filer och många andra dokument upptäcks under genomsökningen – vanligtvis som länkar från sidor – och laddas ned som filer i stället för att återges som fullständiga webbläsarsidor. De räknas fortfarande mot dokumentkapaciteten och måste fortfarande vara åtkomliga.

Om en PDF-URL inte ser ut som en PDF (till exempel om den saknar filtillägget .pdf) kan Silktide klassificera den som en sida och i stället använda sidtilldelning. Se Varför kan sidgränser hindra PDF-filer från att testas?.

Varför detta är viktigt

Eftersom Silktide använder en riktig webbläsare:

Den upplever klientrenderat innehåll, inte bara det råa HTML-svaret
Den kan interagera med sidor – stänga banderoller, köra användarflöden eller slutföra konfigurerad autentisering
Den kan ta skärmbilder och mäta visuella egenskaper som kontrast och layout
Förfrågningar kommer fortfarande från Silktides infrastruktur (eller en proxy), så brandväggar och botskydd kan fortfarande störa

För ett kortare svar på frågan ”ser Silktide det jag ser?”, se Hur ser Silktide webbplatser?.