Crawling & Logs Aktualisiert 2026-11-16 3 Min. Google · Bing · KI-Snippets

Meta Robots vs. X-Robots-Tag: Vorrangregeln & data-nosnippet-Steuerung

Widersprechen sich HTTP-Header und HTML-Meta-Tag, greift immer die strengere Vorgabe. Vermeiden Sie zudem die Disallow-Falle.

Dmitry K., Technical SEO Lead · SEO Space

Technische Indexierungs-Benchmarks

Konfliktregel
Strengste Direktive gewinnt
Binärdateien (PDF)
Nur X-Robots-Tag
Bereichsschutz
Attribut data-nosnippet

Konfliktauflösung zwischen HTTP-Header und HTML-<head>

Sendet ein Edge-Proxy `X-Robots-Tag: noindex`, während das CMS `<meta name="robots" content="index, follow" />` ausgibt, befolgt Google immer `noindex`. Prüfen Sie Proxy-Standardregeln vor jedem Rollout.

Sperrt zudem `robots.txt` per `Disallow`, kann kein Bot die `noindex`-Direktive im Dokument auslesen.

location ~* \.(pdf|xlsx)$ {
  add_header X-Robots-Tag "noindex, nofollow" always;
}

Präzise Auszüge mittels data-nosnippet und max-snippet

Versehen Sie Cookie-Hinweise oder rechtliche Fußnoten mit `data-nosnippet`, damit Such- und KI-Snippets gezielt Ihre technischen Kernfakten darstellen.

Direktive Wirkungsbereich Praxiseinsatz
`noindex, follow` Gesamte URL Komplexe Filter & interne Suchergebnisse
`max-snippet:-1` SERP & KI-Vorschau Leistungsseiten & Fachartikel
`data-nosnippet` Einzelnes HTML-Element Boilerplate aus Snippets ausblenden

Post-Deploy-Checks gegen versehentliches Noindex

Testen Sie nach jedem Release per `curl`, dass produktive Templates weder Header- noch Meta-`noindex` aus Testumgebungen erben.

  • Produktivseiten klar indexierbar halten.
  • `X-Robots-Tag` konsequent für PDFs, Feeds und Staging-Hosts nutzen.
  • Search-Console-Ausschlüsse wöchentlich auf Anomalien kontrollieren.

Soll Ihre aktuelle Indexierung direkt geprüft werden?

Senden Sie uns Ihre Domain – wir analysieren HTML-Parität, Log-Signale, Canonicals und Sitemap-Struktur innerhalb von 24 Stunden.