XML-sitemap

Een XML-sitemap is een machineleesbaar bestand, meestal op \/sitemap.xml, met een lijst van pagina's van een website die bedoeld zijn om door zoekmachines te worden gecrawld en geïndexeerd. Grote sites splitsen deze vaak op in meerdere bestanden die door een sitemapindex worden samengebracht.

Zoekmachines ontdekken de sitemap direct of via een regel "Sitemap:" in robots.txt, en gebruiken deze om nieuwe en bijgewerkte pagina's sneller te vinden dan met alleen crawlen. De meeste contentmanagementsystemen kunnen er automatisch een genereren. Het opnemen van de canonieke URL van een pagina in de sitemap fungeert ook als een zwakke aanwijzing voor welke versie van dubbele content zoekmachines als gezaghebbend moeten beschouwen.

Meer informatie

• Sitemaps XML-formaat - de protocolspecificatie
• robots.txt
• Canonieke URL