Freqo Compass · Ratgeber

Sitemap und robots.txt

Diese beiden kleinen Dateien sagen Suchmaschinen, was sie auf Ihrer Website lesen sollen. Ein Fehler in einer davon kann ganze Bereiche Ihrer Website aus den Suchergebnissen verschwinden lassen.

Warum das wichtig ist

Die robots.txt sagt Robots, was sie lesen dürfen. Eine einzige falsche Zeile, etwa „Disallow: /“, kann Ihre ganze Website sperren.
Die Sitemap listet die Seiten auf, die in den Suchergebnissen erscheinen sollen. Veraltete Adressen (Weiterleitungen, Fehler, mit noindex markierte Seiten) senden widersprüchliche Signale.

So prüfen Sie sie

Öffnen Sie ihre-website.de/robots.txt und ihre-website.de/sitemap.xml in Ihrem Browser, und prüfen Sie, ob die Sitemap in der robots.txt und in der Google Search Console angegeben ist. Freqo Compass liest beide Dateien jede Woche und vergleicht sie mit den Seiten, die es auf Ihrer Website findet.

So beheben Sie Fehler

Achten Sie darauf, dass die robots.txt keine Seiten sperrt, die in den Suchergebnissen erscheinen sollen, und geben Sie darin Ihre Sitemap an (Sitemap: https://ihre-website.de/sitemap.xml).
Führen Sie in der Sitemap nur endgültige, indexierbare Adressen auf: keine Weiterleitungen, keine Fehler, keine noindex-Seiten.
Halten Sie die Sitemap aktuell. Die meisten Website-Baukästen und CMS können sie für Sie erzeugen.
Bei ähnlichen Seiten zeigt ein Canonical-Tag auf die Hauptversion. Bei mehrsprachigen Websites müssen Hreflang-Tags jede Sprachversion mit allen anderen verknüpfen, in beide Richtungen.

Was Freqo Compass prüft

Eine robots.txt, die die ganze Website sperrt
Eine Sitemap, die fehlt, nicht lesbar ist oder falsche Adressen enthält
Seiten, die in der Sitemap fehlen
Canonical-Tags, die defekt sind oder auf eine andere Website zeigen
Hreflang-Tags ohne Rückverweis
Mit noindex markierte Seiten

Dies ist eine der 39 Prüfungen, die Freqo Compass jede Woche auf Ihrer Website durchführt, jeweils mit einer Erklärung, wie Sie das Problem beheben. Freqo Compass entdecken

Weitere Ratgeber

Kein Tool kann eine Position in den Suchergebnissen garantieren, wir auch nicht.