Tilbake til guider
robots.txt AI-Audit
Denne guiden lar en AI-assistent analysere prosjektets robots.txt og sikre at AI-crawlere som ChatGPT og Claude får tilgang til innholdet ditt.
Vanskelighet: EnkelTid: 5-10 minutterKrever: Claude Code
Trigger-prompt
Kopier denne teksten og lim inn i Claude Code:
Kopier dettetext
Hent og utfør oppskriften fra https://marketing.no/guide/robots-txt-audit.mdHva gjør denne guiden?
- 1.Søker etter eksisterende robots.txt i prosjektet ditt
- 2.Analyserer hvilke AI-crawlere som er tillatt eller blokkert
- 3.Evaluerer mot beste praksis for AI-readiness
- 4.Genererer en rapport med score og anbefalinger
- 5.Oppretter eller forbedrer robots.txt med AI-crawler regler
Forutsetninger
Claude Code(obligatorisk)
Tilgang til prosjektets public/ mappe(obligatorisk)
Se AI-instruksjonene
Du kan lese hele guiden som AI-en følger: