Hvad er Noindex via header?
Noindex via header er en metode, hvor man instruerer søgemaskiner om ikke at indeksere en side ved at tilføje en X-Robots-Tag: noindex HTTP-header til sidens serverrespons. Dette er et alternativ til brug af meta-tags i HTML-koden, og bruges især til filer eller sider, hvor man ikke har kontrol over sidens HTML-indhold. Noindex via header er et centralt værktøj til at styre, hvilke sider søgemaskiner må vise i søgeresultaterne.
Hvornår bruges det?
Noindex via header anvendes typisk, når indhold ikke bør dukke op i Google eller andre søgemaskiner, men hvor det ikke er muligt eller praktisk at ændre selve HTML-koden. Det bruges ofte på PDF-filer, billeder, eller dynamisk genererede sider uden adgang til HTML, samt hvor standard-metadata-løsninger ikke er tilstrækkelige. Løsningen er særligt anvendelig, hvis man administrerer mange forskellige filtyper eller har behov for central styring fra serveren. Det giver større fleksibilitet og kontrol end kun at benytte meta-tags.
Eksempel: En virksomhed deler whitepapers som PDF-filer, men ønsker ikke, at disse skal optræde i søgemaskiner. Ved at konfigurere deres webserver til at sende X-Robots-Tag: noindex i HTTP-headeren for alle PDF-URLs, forhindrer de effektivt indeksering af disse filer uden at ændre filerne direkte.
Typiske fejl
- Glemmer at sætte headeren rigtigt op for alle relevante filtyper.
- Tilsidesætter utilsigtet headeren med andre serverregler.
- Antager fejlagtigt, at effekten er øjeblikkelig; søgemaskiner skal gencrawle siden først.
Relaterede begreber: Meta robots tag, robots.txt, canonical tag
