Vefskrið

Áður en Silktide getur prófað eitthvað þarf það að sækja það. Vefskriður byrjar á heimasíðu vefsins þíns, les það sem hann finnur, fylgir tenglum og heldur áfram þar til hann hefur farið yfir allt innan umfangs.

Oftast er þetta ósýnilegt og þú sérð aðeins niðurstöðurnar í birgðaskránni. Hér er útskýrt hvernig þessi söfnun virkar – og hvað skal gera þegar vefsvæði svarar hægt, neitar beiðnum eða birtir Silktide annað efni en þér.

Hvernig vefskrið virkar

• Hvernig Silktide skriður vefi – prófun í raunverulegum vafra, síður samanborið við skrár og almennt líkan fyrir söfnun.
• Uppgötvun – hvernig vefslóðir komast í biðröðina úr tenglum, vefkortum og þvinguðum síðum.
• Umfangsreglur – reglur um hvað er leyft, hafnað og þvingað, og hvers vegna allur vefurinn byggist eingöngu á vefslóðum.

Tenging og hleðsla

• Hvaðan Silktide tengist – AWS-IP-tölur, umboð og notandaumboðið.
• Hleðsla síðu – tímamörk, vefkökurammar, skrun, laumuhamur og aðrar ítarlegar stillingar.

Þegar eitthvað fer úrskeiðis

• Takmörkun á tíðni og endurtekningar – hvað gerist þegar vefsvæði neitar beiðnum sem berast of hratt.
• Þegar vefskrið mistekst – vélmennaþjónusta, auðkenning, rangt efni og aðrar algengar hindranir.

Tengt efni

• Prófunarumfang – hvernig Silktide ákveður hvaða efni skuli finna og greina.
• Hvað við prófum – stilltu reglur um leyfðar, bannaðar og þvingaðar vefslóðir.
• Ítarlegar stillingar – samhliða beiðnir, tímamörk síðna, umboð og aðrar stýringar á hleðslu.
• Umfang birgðaskrár – hvers vegna það sem Silktide fann kann að vera frábrugðið lista úr CMS.