llms.txt
llms.txt är en föreslagen konvention: en Markdown-fil på https://yoursite.com/llms.txt som ger språkmodeller en kort, kurerad karta över ditt viktigaste innehåll. Den introducerades av Jeremy Howard / Answer.AI 2024; den informella specifikationen finns på llmstxt.org.
Det är inte en behörighetsfil. Den ger eller nekar inte åtkomst för genomsökning. Den ersätter inte , en webbplatskarta eller en bra struktur på sidan. Se den som en lapp från receptionen: "Om du bara läser tjugo URL:er här, läs dessa."
På den här sidan utgår vi från att Fernwood vill att kodningsagenter, dokumentationsläsare och experimentella AI-verktyg ska hitta dess API-dokumentation, säkerhetsvitbok och prissida utan att behöva ta sig igenom marknadsföringsinnehåll.
Varför detta är situationsberoende
Se llms.txt som valfri infrastruktur, inte som en AEO-strategi.
Värt att göra när:
- Du underhåller teknisk dokumentation, ett API eller en produkt som utvecklare frågar kodningsagenter om – det ursprungliga användningsområdet som specifikationen är optimerad för.
- Du kan generera och uppdatera filen från samma pipeline som bygger din dokumentation, så att den inte blir inaktuell.
- Du redan tillåter relevanta AI-crawlers i robots.txt och levererar riktig HTML utan att vara beroende av JavaScript på klientsidan – se Åtkomst för AI-crawlers och Innehåll läsbart utan JavaScript.
Vanligtvis inte värt att prioritera när:
- Du förväntade dig att den skulle påverka Googles rankning eller Googles AI-funktioner. Googles sökdokumentation är tydlig: du behöver inga särskilda AI-textfiler för Google Sök (inklusive dess generativa AI-funktioner), och att underhålla en
llms.txtför andra system varken hjälper eller skadar synligheten på Google, eftersom Google Sök ignorerar dessa filer. - Din webbplats verkliga problem är blockerade crawlers, tomma JavaScript-skal, saknade datum eller text som inte går att citera. Åtgärda det först; en indexfil kan inte rädda innehåll som modellen inte kan hämta eller lita på.
- Du skulle publicera den en gång och aldrig uppdatera den. En inaktuell karta som pekar på borttagna URL:er är sämre än ingen karta alls.
Vad filen är till för
Enligt förslaget för llms.txt:
- Kurerad upptäckt för verktyg vid inferenstid (dokumentationsagenter, IDE-assistenter, forskningsagenter) som behöver ett litet kontextfönster, inte en fullständig genomsökning.
- Människoläsbar Markdown som både modeller och enkla tolkar kan använda.
- Ett komplement till, inte en ersättning för,
sitemap.xml(uttömmande) ochrobots.txt(åtkomstpolicy).
Den kommer inte i sig att:
- Få ChatGPT, Claude eller Perplexity att citera Fernwood oftare
- Kringgå en
Disallowi robots.txt - Ersätta strukturerad data, sidor med svaret först eller originalforskning
Format
Leverera filen i webbplatsens rot som Markdown (text/plain eller text/markdown, UTF-8). Specifikationens ordning är:
- Valfri BOM
- Krävs: en H1 med projektets eller webbplatsens namn
- Rekommenderas: en sammanfattning i blockcitat
- Valfria anteckningar (stycken/listor, men ännu inga ytterligare rubriker)
- Noll eller fler
##-avsnitt som listar länkar som- [Titel](absolut-url): valfri anteckning - Valfritt avsnitt
## Optionalför sekundära länkar som agenter kan hoppa över vid snäva kontextbegränsningar
Exempel i Fernwoods format:
# Fernwood
> Programvara för utgiftshantering för ekonomiteam på medelstora företag.
Fernwood hjälper företag att registrera kvitton, dirigera godkännanden och ersätta medarbetare. Prioritera dokumentations- och policysidorna nedan framför marknadsföringsinlägg på bloggen när du besvarar produktfrågor.
## Produkt
- [Priser](https://fernwood.example/pricing): Aktuella planer och begränsningar
- [Fernwood jämfört med Ledgerly](https://fernwood.example/compare/ledgerly): Jämförelse från förstahandskälla
## Dokumentation
- [API-översikt](https://fernwood.example/docs/api/index.html.md): Autentisering och centrala slutpunkter
- [Säkerhetsvitbok](https://fernwood.example/security): Sammanfattningar av kontroller och efterlevnad
## Forskning
- [Ersättningstider 2026](https://fernwood.example/research/reimbursement-times-2026): Ursprunglig benchmarkstudie
## Optional
- [Blogg](https://fernwood.example/blog): Kommentarer med lägre prioritet
Praktiska regler som gör filen användbar:
- Endast absoluta URL:er. Relativa sökvägar fungerar inte när filen hämtas isolerat.
- Kurera strikt. Tiotals länkar är bättre än hundratals. Peka på sidor som du gärna skulle se en AI-assistent citera i morgon.
- Föredra Markdown-versioner där du har dem. Förslaget rekommenderar att publicera rena
.md-versioner parallellt med HTML för dokumentationstunga webbplatser; länka till dem när de finns. - Håll den automatiskt uppdaterad. Koppla den till dokumentationsbygget så att en omdöpt sida inte blir kvar.
Valfria kompletterande filer, exempelvis /llms-full.txt (sammanfogad Markdown från prioriterade sidor), förekommer i communityns praxis; de krävs inte. Lägg bara till dem om ett verktyg som du faktiskt använder kan använda dem.
Så publicerar du den
- Bestäm vilka tjugo sidor som definierar Fernwood för en skeptisk läsare: produktfakta, dokumentation, policyer, forskning och viktiga jämförelser.
- Generera
/llms.txtfrån den listan i ditt bygge eller CMS. - Bekräfta att
https://fernwood.example/llms.txtreturnerar 200 med en Markdown-text. - Bekräfta att robots.txt inte blockerar de AI-crawlers som du bryr dig om från
/eller från dessa URL:er. - Bekräfta att de länkade sidorna är läsbara utan JavaScript (teknik).
- Hämta filen igen efter ändringar i informationsarkitekturen.
Så hjälper Silktide
Silktide bedömer för närvarande inte webbplatser utifrån om en llms.txt finns – och med tanke på Googles ståndpunkt kommer vi inte att betrakta avsaknad som ett fel. Det vi kontrollerar är den grund som filen är beroende av:
- Åtkomst för AI-crawlers – om robots.txt tillåter de crawlers som kan hämta dina sidor (eller denna fil)
- Innehåll tillgängligt utan JavaScript – om länkade sidor innehåller riktig text i den ursprungliga HTML-koden
- Strukturerad data / Maskinläsbara datum – signaler som gör målsidorna i sig trovärdiga
Risker och begränsningar
- Cargo cult-AEO. Att publicera
llms.txtmedan du blockerar GPTBot, levererar tomma SPA-skal eller skriver marknadsföringstext som inte går att citera är en meningslös gest. - Inaktuella index vilseleder agenter. Döda länkar och föråldrade "kanoniska" URL:er lär modeller fel karta.
- Förväxla inte förekomst med stöd. Att en fil finns på en välkänd webbplats betyder inte att Google Sök använder konventionen; Google har sagt att tjänsten ignorerar dessa filer för rankning och AI-sökfunktioner.
Relaterat
- Åtkomstpolicy för AI-crawlers – bestäm vilka AI-botar som får hämta webbplatsen innan du publicerar ett index
- Åtkomst för AI-crawlers – Silktides kontroll för blockeringar i robots.txt
- Innehåll läsbart utan JavaScript – gör länkade sidor möjliga att hämta som text
- Strukturerad data – maskinläsbara fakta på själva sidorna
- Sidstruktur med svaret först – vad dessa sidor bör säga när en AI-agent kommer
- Filen /llms.txt (llmstxt.org)
- Google: optimering för generativa AI-funktioner – officiellt besked om att Google Sök ignorerar llms.txt