Werkzeuge
Leitfäden

Robots-Meta-Generator

Dev

Setzt den <meta name="robots">-Tag und den X-Robots-Tag-Header aus index/noindex/follow/noarchive und weiteren Direktiven zusammen.

100 % clientseitig Ohne Backend
Optionen
Meta-Tag
X-Robots-Tag-Header
Auf dieser Seite

Was ist eine Robots-Meta-Direktive?#

Eine Robots-Meta-Direktive teilt Suchmaschinen-Crawlern mit, was sie mit einer Seite tun dürfen: sie indizieren oder nicht, ihren Links folgen oder nicht, eine zwischengespeicherte Kopie behalten, ein Snippet in den Ergebnissen zeigen und so weiter. Sie ist der Hebel auf Seitenebene, den Sie ziehen, wenn eine URL öffentlich bleiben muss (eine Staging-Seite, eine Dankesseite, ein rechtliches PDF), aber nicht in den Google-Ergebnissen auftauchen soll, oder wenn Sie gestalten wollen, wie ein Ergebnis-Snippet aussieht.

Eine Direktive kann an zwei Orten leben. Der Robots-Meta-Tag sitzt im HTML-<head> der Seite und gilt für dieses eine HTML-Dokument. Der X-Robots-Tag-HTTP-Header reist in der Antwort selbst mit und gilt für alles, was ein Server zurückgibt — ein PDF, ein Bild, ein Video, eine JSON-Datei — einschließlich Ressourcen, die keinen <head> haben, um einen Tag unterzubringen. Suchmaschinen berücksichtigen beide; dieses Werkzeug erzeugt beide Formen aus demselben Satz Schalter, sodass Sie das kopieren können, das Ihr Stack braucht.

Die wichtigste Regel, an die Sie sich erinnern sollten: Das Fehlen einer Direktive bedeutet „keine Einschränkung“. Eine Seite ganz ohne Robots-Tag wird als index, follow behandelt — vollständig crawlbart. Die Direktiven, die dieses Werkzeug erzeugt, sind alles opt-in-Einschränkungen zusätzlich zu diesem Standard. Googles Referenz definiert den Standardsatz, und genau dem entsprechen die Schalter hier.

So wird es verwendet#

  1. Aktivieren Sie die Kontrollkästchen unter Optionen auf der linken Seite. Die ersten beiden sind besonders — sie sind standardmäßig angekreuzt:
    • Indizierung erlauben / Links folgen — abwählen, um noindex / nofollow auszugeben.
    • noarchive — verhindert, dass Google einen „Im Cache“-Link anzeigt.
    • nosnippet — unterdrückt das Text-Snippet unter dem Ergebnis.
    • noimageindex — verhindert, dass die Bilder dieser Seite als verweisende Seiten indiziert werden.
    • notranslate — lehnt das „Diese Seite übersetzen“-Angebot in den Ergebnissen ab.
    • noodp — veraltet; ignoriert den veralteten DMOZ/ODP-Titel.
    • nositelinkssearchbox — unterdrückt die Sitelinks-Suchbox.
  2. Wählen Sie optional ein Datum und eine Uhrzeit unter unavailable_after — die Seite wird nach diesem Zeitpunkt aus den Suchergebnissen entfernt. Nützlich, um eine Aktion oder ein zeitlich begrenztes Dokument ablaufen zu lassen.
  3. Lesen Sie die beiden Ausgaben auf der rechten Seite:
    • Meta-Tag — das vollständige Element <meta name="robots" content="...">, fertig zum Einfügen in einen <head>.
    • X-Robots-Tag-Header — die HTTP-Header-Form, bereit zum Hinzufügen zu Ihrer Server- oder CDN-Antwortkonfiguration.
  4. Klicken Sie neben einer der Ausgaben auf Kopieren, um sie zu übernehmen.

Die wichtigsten Funktionen#

  • Beide Formen aus einer Quelle. Meta-Tag und X-Robots-Tag-Header werden gemeinsam erzeugt, sodass HTML-Seiten und Nicht-HTML-Ressourcen (PDFs, Bilder) dieselbe Direktive erhalten.
  • Standard-bewusst. index und follow sind standardmäßig aktiviert, passend zum echten Web-Standard „keine Einschränkung, sofern nicht angegeben“.
  • Voller Standard-Direktivsatz. Deckt jede Direktive ab, die Google dokumentiert — noindex, nofollow, noarchive, nosnippet, noimageindex, notranslate, noodp, nositelinkssearchbox und unavailable_after.
  • unavailable_after-Unterstützung. Die einzige Direktive, die einen Wert nimmt; sie wird als unavailable_after: <Datum> zusammengesetzt und wortwörtlich durchgereicht, sodass Sie das exakte Format kontrollieren.
  • 100 % clientseitig. Keine Konfiguration hochzuladen, kein Server-Roundtrip — generieren und kopieren, dann das Ergebnis selbst in Ihrem CMS, Template oder der nginx-Konfiguration anwenden.

Anwendungsbeispiel#

Belassen Sie die Standardwerte (nur index und follow aktiviert) und beide Ausgaben lauten:

<meta name="robots" content="index, follow">
X-Robots-Tag: index, follow

Das ist die explizite Form von „keine Einschränkung“ — nützlich, wenn Sie ausdrücklich klarmachen wollen, dass eine Seite vollständig crawlbart ist.

Deaktivieren Sie nun Indizierung erlauben (um eine Dankesseite aus dem Index herauszuhalten, während Sie Link-Equity durch ihre Links weiterreichen) und die Ausgaben werden zu:

<meta name="robots" content="noindex, follow">
X-Robots-Tag: noindex, follow

Ein dritter Fall: Eine Landingpage für eine saisonale Kampagne, die nach ihrem Ende verschwinden muss. Behalten Sie index und follow aktiviert, setzen Sie unavailable_after auf das Ende der Kampagne, und der Tag wird zu:

<meta name="robots" content="index, follow, unavailable_after: 2025-12-31T00:00">

Google wird die Seite nach diesem Zeitpunkt nicht mehr in den Ergebnissen zeigen. Der Datumswert wird genau so ausgegeben, wie Sie ihn ausgewählt haben, sodass Sie bestätigen sollten, dass er zu einem Format passt, das Ihre Zielsuchmaschine akzeptiert.

FAQ#

Was ist der Unterschied zwischen noindex in einem Meta-Tag und Disallow in der robots.txt?#

Sie arbeiten auf unterschiedlichen Ebenen und dürfen nicht sorglos gemischt werden. noindex ist eine Direktive, die der Crawler nach dem Abrufen der Seite liest. Wenn Sie die URL in der robots.txt blockieren, ruft der Crawler sie nie ab, sieht das noindex nie und kann die URL dennoch anhand von Links indizieren, die auf sie zeigen. Um eine Seite zuverlässig aus dem Index herauszuhalten, erlauben Sie das Crawlen, aber fügen Sie noindex hinzu — verbergen Sie die Seite nicht vollständig vor dem Crawler.

Wann sollte ich den X-Robots-Tag-Header statt des Meta-Tags verwenden?#

Wann immer die Ressource kein HTML ist — ein PDF, ein Bild, ein Video, eine Tabelle — gibt es kein <head>-Element für einen Meta-Tag, sodass der Header die einzige Option ist. Er ist auch die richtige Wahl, um eine Regel für viele Dateien zugleich über Ihre Server- oder CDN-Konfiguration anzuwenden, statt jedes Dokument einzeln zu bearbeiten.

Ja. noindex steuert, ob die Seite in den Ergebnissen erscheint; follow steuert, ob der Crawler den Links auf der Seite folgt. noindex, follow hält die Seite aus dem Index, lässt aber zu, dass Link-Equity durch die ausgehenden Links der Seite fließt. Das ist das Standardrezept für Dankesseiten, interne Suchergebnisse und Facetten-Filter-Seiten.

Warum gibt das Werkzeug überhaupt index, follow aus, wenn das der Standard ist?#

Weil Explizitheit nützlich sein kann: Sie dokumentiert die Absicht im Seitenquelltext, sie kann eine restriktivere vererbte Regel überschreiben, und manche Teams behandeln das Vorhandensein des Tags als Signal dafür, dass die Seite geprüft wurde. Wenn Sie sich lieber auf den impliziten Standard verlassen möchten, lassen Sie den Tag einfach weg — ihn vollständig wegzulassen ist äquivalent zu index, follow.