Von Google lesbar und auffindbar

Was wir prüfen

Wir suchen nach Einstellungen, welche die Startseite ganz aus der Google-Suche ausschliessen:

• noindex: ob die Startseite im Meta-Tag robots oder im HTTP-Header X-Robots-Tag mit «noindex» markiert ist,
• robots.txt: ob es eine robots.txt gibt und ob sie Google für die ganze Website sperrt,
• Canonical auf fremde Domain: ob der Canonical-Tag der Startseite auf eine andere Domain zeigt,
• Snippet-Steuerung: ob «nosnippet», ein «max-snippet» unter 50 Zeichen oder data-nosnippet auf mehr als der Hälfte des Textes Google verbieten, die Seite zu zitieren.

«noindex», eine Komplettsperre und ein Canonical auf eine fremde Domain sind schwere Mängel. Eine Snippet-Einschränkung ist eine Warnung, eine fehlende robots.txt nur ein Hinweis.

Warum das wichtig ist

Diese Einstellungen sind wie ein Schild «Bitte nicht betreten» für Suchmaschinen. Google hält sich daran, und die Website verschwindet aus den Suchergebnissen, egal wie gut sie sonst ist.

Das passiert häufiger, als man denkt, und fast immer unabsichtlich:

• Während der Entwicklung wird «noindex» gesetzt, damit die halbfertige Seite nicht bei Google erscheint. Nach dem Livegang vergisst man, es zu entfernen.
• Eine Agentur kopiert die robots.txt der Testumgebung mit Disallow: / auf die echte Website.
• Nach einem Domainwechsel zeigt der Canonical-Tag noch auf die alte Domain.

Weil die Website für Besucher normal aussieht, fällt der Fehler oft erst nach Wochen auf, wenn die Anfragen ausbleiben.

Snippets sind die Textauszüge, die Google unter dem Titel eines Suchergebnisses zeigt. Dieselben Auszüge verwendet Google für die KI-Übersichten (AI Overviews) und den KI-Modus. Eine Seite mit «nosnippet» erscheint dort ohne Beschreibung oder gar nicht, obwohl sie im Index ist. Manche SEO-Plugins und Datenschutz-Erweiterungen setzen die Angabe, ohne dass es jemand merkt.

So behebst Du es

noindex entfernen

• WordPress: Unter «Einstellungen › Lesen» darf die Option «Suchmaschinen davon abhalten, diese Website zu indexieren» nicht angehakt sein. In Yoast SEO oder Rank Math prüfst Du zusätzlich die Einstellungen der Startseite.
• Wix, Jimdo, Squarespace: In den SEO-Einstellungen der Seite gibt es eine Option wie «Seite in Suchergebnissen anzeigen». Sie muss eingeschaltet sein. Bei manchen Baukästen ist die Website erst nach dem Veröffentlichen oder mit eigener Domain indexierbar.

robots.txt korrigieren

Eine einfache robots.txt, die alles erlaubt und auf die Sitemap verweist, sieht so aus:

User-agent: *
Disallow:

Sitemap: https://www.beispiel.ch/sitemap.xml

Disallow: / bedeutet dagegen «alles gesperrt».

Snippets erlauben

Entferne nosnippet und max-snippet aus dem Meta-Tag robots und dem Header X-Robots-Tag, oder setze max-snippet:-1. data-nosnippet ist für einzelne Stellen gedacht, etwa Preise, die sich oft ändern, nicht für ganze Textblöcke. In Yoast SEO und Rank Math findest Du die Einstellung unter «Erweitert › Meta Robots».

Canonical korrigieren

Der Canonical-Tag der Startseite muss auf die eigene Domain zeigen. Mehr dazu im Artikel zum Canonical-Tag.

So prüfst Du es selbst

Ruf https://beispiel.ch/robots.txt im Browser auf. Such bei Google nach site:beispiel.ch: Erscheinen keine Treffer, ist die Website nicht im Index. Die kostenlose Google Search Console zeigt für jede Seite, ob und warum sie ausgeschlossen ist.

Häufige Fragen

Wie lange dauert es, bis meine Seite nach der Korrektur wieder bei Google erscheint?

Meist einige Tage bis wenige Wochen. Schneller geht es, wenn die Seite in der Google Search Console geprüft und die Indexierung beantragt wird.

Brauche ich überhaupt eine robots.txt?

Sie ist nicht Pflicht, aber nützlich: Sie verweist auf die Sitemap und legt fest, welche Bereiche Suchmaschinen und KI-Dienste lesen dürfen. Ohne sie gelten überall die Standardregeln.