Indeksoitavuusnäkymä
Indeksoitavuus vastaa eri kysymykseen kuin näkyvyys: ei siihen, mainitsevatko avustajat sinut, vaan siihen, saavatko sivustoasi lukevat indeksointirobotit tehdä niin ja pääsevätkö ne todella perille.
Silktide tarkistaa omat verkko-osoitteet. Et tarvitse yhdistettyä verkkosivustoa tai Analytiikkaa, jotta tämä näkymä toimii.
Mitä se tarkistaa
Jokaisen seuraamasi brändin verkko-osoitteesta Presence lukee robots.txt- ja llms.txt-tiedostot ja testaa Silktiden seuraamia indeksointirobotteja:
- Hakukoneet, kuten Googlebot, Bingbot ja Applebot
- Tekoälyn indeksointirobotit, kuten GPTBot, ClaudeBot, PerplexityBot ja CCBot
Hakukoneen indeksointirobotin estäminen on vakavampaa kuin tekoälybotin estäminen: se voi poistaa sivuston kyseisestä hakukoneesta, ei vain tekoälyvastauksista.
Ilmoitettu ja todellinen pääsy
Kaksi havaintoa pidetään erillään:
- Estetty robots.txt-tiedostossa tarkoittaa, että sivuston julkaistut säännöt kieltävät pääsyn.
- Estetty käytännössä tarkoittaa, että palvelin kieltäytyi indeksointirobotin pyynnöstä, vaikka robots.txt sallii sen. Tämä viittaa usein palomuuri- tai CDN-sääntöön, jonka määrittämistä kukaan ei muista.
Kun Silktide ei voi lähettää reaaliaikaista pyyntöä indeksointirobottina, näkymä näyttää robots.txt-tiedoston ilmoittamat tiedot väittämättä, että reaaliaikainen testaus tehtiin.
Kun kaikki näyttää tilan "Ei arvioitu"
Jokainen tarkistus alkaa kontrollista: Silktide hakee sivun tavallisena verkkoselaimena. Jos sivusto torjuu myös tämän pyynnön, yksittäisestä indeksointirobotista ei voida tehdä päätelmää, joten koko sarakkeessa näkyy sen sijaan Ei arvioitu.
Tämä tarkoittaa yleensä, että sivusto on bottisuojapalvelun (kuten Cloudflaren) takana. Tällainen palvelu haastaa tunnistamattomat automatisoidut kävijät, myös Silktiden tarkistukset. Se ei tarkoita, että indeksointirobotit on estetty. Suuret haku- ja tekoälyindeksointirobotit todistavat henkilöllisyytensä verkko-osoitteellaan, ja bottisuojapalvelut päästävät nämä vahvistetut indeksointirobotit tavallisesti läpi samalla, kun ne torjuvat kaikki muut. Silktide ei voi käyttää näitä osoitteita, joten se raportoi sen, mitä se ei voinut nähdä, arvailemisen sijaan.
Nopea tapa varmistua asiasta: jos sivuston sivuja näkyy Googlen tuloksissa tai tekoälyavustajat viittaavat niihin, oikeat indeksointirobotit lukevat niitä.
Aikataulu ja Tarkista nyt
Sivustot tarkistetaan viikoittain, jotta lähtevät pyynnöt pysyvät kohtuullisina. Tarkista nyt suorittaa uuden tarkistuksen, kun olet juuri muuttanut robots.txt-tiedostoa etkä halua odottaa.
Viimeaikaiset sääntömuutokset näkyvät Muutokset-luettelossa viimeisten viikkojen ajalta.
Kilpailijat
Kun seuraat kilpailijoita, sama ruudukko näyttää niiden verkko-osoitteet omiesi vieressä. Näet, onko kilpailija avoin indeksointiroboteille, jotka olet estänyt, tai päinvastoin.
Aiheeseen liittyvää
- Analytiikka - käynnit, joita nämä indeksointirobotit ja alustat lähettävät, kun ne voivat tavoittaa sinut
- AEO-raportit - sivukohtaiset valmiusarviot, mukaan lukien indeksointirobottien pääsy
- Presence ja AEO - valmius, näkyvyys ja ohjattu liikenne