Meta robots er et HTML-element, der giver søgemaskiner sidebaserede regler for indeksering og visning i søgeresultater. Det placeres normalt i sidens <head>, eksempelvis:
<meta name="robots" content="noindex, follow">Almindelige direktiver
- noindex: Siden må ikke vises i søgeresultater.
- nofollow: Søgemaskinen skal ikke følge links på siden. Uden direktivet kan links bruges til opdagelse.
- nosnippet: Der må ikke vises tekst- eller videoforhåndsvisning for resultatet.
- max-snippet: Sætter en grænse for tekstsnippet.
- max-image-preview: Styrer størrelsen på billedforhåndsvisninger.
- none: Svarer til
noindex, nofollow.
index, follow er normalt standardadfærden og behøver derfor sjældent at blive skrevet eksplicit.
Meta robots og robots.txt løser forskellige opgaver
Robots.txt styrer, om crawleren må hente en URL. Meta robots kan først læses, når siden er hentet. Hvis du blokerer URL’en i robots.txt, kan Google derfor ikke se dens noindex-direktiv.
Hvis målet er at fjerne en offentlig side fra Googles indeks, skal Google normalt kunne crawle den og læse noindex. Følsomt indhold bør beskyttes med login eller anden reel adgangskontrol – ikke med robots-direktiver.
Hvornår bruges X-Robots-Tag?
For PDF’er, billeder og andre filer uden en HTML-<head> kan tilsvarende regler sendes i HTTP-headeren X-Robots-Tag. Det kan også bruges til regler på grupper af svar, men kræver præcis serverkonfiguration.
Typiske fejl
- At kombinere
noindexmed en robots.txt-blokering. - At lade en testskabelon sætte noindex på hele sitet.
- At have modstridende regler i flere meta-tags eller HTTP-headers; Google kombinerer restriktive regler.
- At sætte noindex med JavaScript efter levering og forvente, at alle crawlere altid ser ændringen.
- At bruge noindex som løsning på dubletter, hvor et canonical-tag bedre beskriver den foretrukne URL.
Kontrollér altid den leverede HTML og response headers – ikke kun indstillingen i CMS’et – og brug URL-inspektion til at se Googles observation.
Kilde kontrolleret 10. oktober 2026: Google Search Central om robots meta-tag og X-Robots-Tag.