Gennemsøgning
Før Silktide kan teste noget, skal det hentes. En starter fra dit websites forside, læser det, den finder, følger links og fortsætter, indtil den har dækket alt inden for testomfang.
Det meste af tiden er dette usynligt, og du ser kun resultaterne i Inventory. Denne sektion forklarer, hvordan hentningen fungerer – og hvad du gør, når et website svarer langsomt, afviser forespørgsler, eller leverer noget andet til Silktide end til dig.
Sådan fungerer gennemsøgning
- Sådan crawler Silktide – test i en rigtig browser, sider vs. filer og den overordnede hentemodel.
- Opdagelse – hvordan URL'er kommer i køen fra links, sitemaps og tvungne sider.
- Omfangsregler – tilladte, afviste og tvungne regler, og hvorfor hele websitet er udelukkende URL-baseret.
Forbindelse og indlæsning
- Hvor Silktide forbinder fra – AWS-IP'er, proxyer og user agent.
- Indlæsning af en side – timeouts, cookiebannere, scrolling, stealth og andre avancerede indstillinger.
Når noget går galt
- Hastighedsbegrænsning og genforsøg – hvad der sker, når et site afviser forespørgsler, der kommer for hurtigt.
- Når gennemsøgning fejler – botbeskyttelse, autentificering, forkert indhold og andre almindelige blokeringer.
Relateret
- Testomfang – hvordan Silktide beslutter, hvilket indhold der skal opdages og analyseres.
- Hvad vi tester – konfigurer tilladte, afviste og tvungne URL-regler.
- Avancerede indstillinger – parallelle forespørgsler, side-timeouts, proxy og andre indlæsningskontroller.
- Inventory-dækning – hvorfor det, Silktide fandt, kan afvige fra en -liste.