Praxisartikel
Praxisartikel
Der erste Artikel dieses Bereichs zeigt, wie Sie eine Website vor dem Launch prüfen, damit Suchmaschinen sie finden und indexieren können. Das Ergebnis: Die Seiten laden ohne Fehler, die robots.txt sperrt nichts Unnötiges, auf den Live-Seiten sind keine Noindex-Sperren aus der Testphase übrig, eine Sitemap ist angelegt, wichtige Seiten sind durch Links verbunden und die Inhaberschaft der Website ist in den Webmaster-Tools bestätigt. Die Beispiele im Artikel sind fiktiv und dienen nur der Veranschaulichung.
Eine Prüfung vor dem Launch bringt Ihre Website nicht wie von Zauberhand schneller in die Suche. Sie räumt nur Hindernisse aus dem Weg, die Sie selbst aufgestellt haben.
Bevor Sie beginnen
- Die Adresse der Website in der Form, in der sie nach dem Launch erreichbar sein wird
- Zugriff auf die Dateien der Website oder das Admin-Panel, um robots.txt und Sitemap anzupassen
- Eine Liste der wichtigsten Seiten: Startseite, Rubriken, Kontakt
- Konten bei Google und Yandex, um die Webmaster-Tools einzurichten
Prüfen Sie, ob die Seiten erreichbar sind
Rufen Sie die wichtigsten Seiten wie ein normaler Besucher auf, ohne Login. Die Seiten müssen ohne Serverfehler laden, und nicht existierende Adressen sollen ehrlich melden, dass es die Seite nicht gibt, statt eine leere Platzhalterseite zu zeigen.
Fiktives Beispiel: Bei jeder vertippten Adresse zeigt die Website die Startseite an. Für eine Suchmaschine sieht das aus wie eine Vielzahl identischer Seiten.
Prüfen Sie die robots.txt
Die Datei robots.txt liegt im Stammverzeichnis der Website und teilt Crawlern mit, welche Bereiche sie nicht crawlen sollen. Das Protokoll entstand 1994 und wurde 2022 als RFC 9309 standardisiert. Stellen Sie sicher, dass die Datei nicht die gesamte Website sperrt, und denken Sie daran: Sie steuert das Crawling, garantiert aber nicht, dass eine Seite nicht im Index landet.
Fiktives Beispiel: Die Testversion wurde komplett für das Crawling gesperrt, und beim Umzug hat man vergessen, die Sperre zu entfernen. Suchmaschinen sehen dann nur noch die Sperre selbst.
Entfernen Sie Noindex-Sperren aus der Testphase
Neben der robots.txt kann eine Indexierungssperre im Code einzelner Seiten oder in den Einstellungen des Content-Management-Systems stehen. Prüfen Sie, dass Live-Seiten keine solchen Sperren haben und technische Seiten nur dort, wo sie wirklich nötig sind.
Fiktives Beispiel: In den CMS-Einstellungen ist noch das Häkchen „Suchmaschinen davon abhalten, diese Website zu indexieren“ aus der Entwicklungsphase gesetzt.
Legen Sie eine Sitemap an
Eine Sitemap im Format des Sitemaps-Protokolls (sitemaps.org) ist eine Liste der Adressen, die Sie Suchmaschinen zeigen möchten. Das Protokoll gibt es seit 2006, und die großen Suchmaschinen unterstützen es. Nehmen Sie nur Live-Seiten auf, die in der Suche erscheinen sollen.
Fiktives Beispiel: In der Sitemap stehen die Adressen von Warenkorb und Kundenkonto. Sie sollten entfernt werden – in der Suche braucht man sie nicht.
Verbinden Sie die Seiten durch Links
Suchmaschinen finden Seiten vor allem über Links. Jede wichtige Seite sollte über das Menü, Rubriken oder andere Inhalte der Website erreichbar sein – nicht nur über die interne Suche oder ein Formular.
Fiktives Beispiel: Artikel sind nur über die interne Suche zu erreichen. Der Crawler hat keinen Link, dem er folgen kann, und ein Teil der Inhalte bleibt unentdeckt.
Geben Sie Seiten verständliche Titel
Jede Seite braucht einen eigenen Titel und eine kurze Beschreibung, die ihren Inhalt wiedergeben. Gleiche Titel auf Dutzenden Seiten erschweren es Besuchern und Suchmaschinen gleichermaßen, die Seiten zu unterscheiden.
Fiktives Beispiel: Alle Produkte tragen den Titel „Onlineshop“. In den Suchergebnissen lassen sich diese Seiten nicht auseinanderhalten.
Kennzeichnen Sie bezahlte und nutzergenerierte Links
Wenn Ihre Website Werbung mit Links enthält, kennzeichnen Sie diese Links mit rel="sponsored" oder rel="nofollow" – das verlangen die Richtlinien der Suchmaschinen. Links in Kommentaren und Foren können Sie mit rel="ugc" kennzeichnen. Der Kauf und Verkauf von Links zur Manipulation des Rankings ist nach den Richtlinien verboten.
Fiktives Beispiel: Ein Partnerbanner führt auf die Website des Werbetreibenden. Der Link darin wird als sponsored gekennzeichnet.
Richten Sie die Webmaster-Tools ein
Bestätigen Sie die Inhaberschaft Ihrer Website in der Google Search Console (bis 2015 Google Webmaster Tools) und in Yandex Webmaster und reichen Sie die Sitemap ein. Diese Tools zeigen Daten der Suchmaschinen selbst: welche Seiten ihnen bekannt sind und welche Fehler beim Crawling auftreten.
Fiktives Beispiel: Nach der Einrichtung meldet das Tool, dass ein Teil der Seiten für den Crawler nicht erreichbar ist. Ein Anlass, zu den Schritten 1–3 zurückzukehren.
Typische Fehler
- Crawling- oder Indexierungssperren aus der Testversion stehen lassen
- Annehmen, dass robots.txt eine Seite zuverlässig aus der Suche entfernt
- Technische und nicht existierende Adressen in die Sitemap aufnehmen
- Wichtige Seiten nur über ein Formular oder die interne Suche erreichbar machen
- Allen Seiten denselben Titel geben
- Links kaufen oder sich an Linkschemata beteiligen, um Rankings zu verbessern
Alternativen
- Wenn Sie keinen Zugriff auf die Dateien der Website haben, bitten Sie Ihren Entwickler oder Hosting-Anbieter, robots.txt und Sitemap anhand dieser Liste zu prüfen.
- Wenn Ihre Website mit einem Baukasten erstellt wurde, suchen Sie in dessen Hilfe nach den Einstellungen für Suchmaschinen: Viele Funktionen lassen sich dort per Häkchen aktivieren.
- Wenn Sie die Webmaster-Tools noch nicht einrichten möchten, prüfen Sie zumindest, ob Ihre Website bei der Suche nach ihrem genauen Namen gefunden wird – das ist allerdings nur eine grobe Prüfung.
Checkliste zum Ergebnis
- Die wichtigsten Seiten laden ohne Login und ohne Fehler
- Nicht existierende Adressen werden nicht durch die Startseite ersetzt
- Die robots.txt sperrt nicht die gesamte Website
- Auf Live-Seiten gibt es keine Noindex-Sperren aus der Testphase
- Die Sitemap ist angelegt und enthält nur Live-Seiten
- Wichtige Seiten sind über Links erreichbar
- Bezahlte Links sind mit sponsored oder nofollow gekennzeichnet
- Die Inhaberschaft ist in der Search Console und in Yandex Webmaster bestätigt
Beitragskatalog für deutschsprachige Leser
In diesem Bereich erscheinen eigenständige Beiträge für Leserinnen und Leser aus Deutschland, Österreich und der Schweiz. Sie berücksichtigen, welche Suchmaschinen und Tools deutschsprachige Website-Betreiber tatsächlich nutzen, und sind keine Übersetzungen von Beiträgen anderer Sprachversionen dieser Website.
Derzeit enthält der Katalog einen Artikel – den obigen. Neue Beiträge erscheinen in dieser Liste.
Themen, die die Redaktion plant
- Berichte der Google Search Console lesen: ein Einstieg für Anfänger
- Seite aus dem Index gefallen: mögliche Ursachen Schritt für Schritt prüfen
- Domainumzug: was Sie bei robots.txt, Sitemap und Weiterleitungen prüfen sollten
- Kommentare und Foren auf der eigenen Website: nutzergenerierte Links richtig kennzeichnen
Redaktionelle Grundsätze
- Die Beiträge in diesem Katalog werden für jede Sprachversion eigens verfasst und sind keine Übersetzungen.
- Einige Beiträge verlinken auf Websites Dritter, darunter Gaming-Dienste; auf deren Inhalte, Preise und Bedingungen haben wir keinen Einfluss.
- Wir veröffentlichen keine unüberprüfbaren Bewertungen von Websites oder Diensten, keine Ranking-Versprechen und keine Erfahrungsberichte.
Verwandte Bereiche
- Antworten auf Fragen
Kurze Antworten zu PageRank, Indexierung, Links und Website-Metriken.
- Glossar
Begriffe von A bis Z: Suche und Indexierung, Links, Metriken.
- Leselisten
Lesepfade: die erste Website, Geschichte der Suchmetriken, Links ohne Spam.
Quellen
- Google Search Central – Dokumentation und Spam-Richtlinien
- Yandex-Hilfe für Webmaster (Yandex Help for webmasters)
- RFC 9309 (Robots Exclusion Protocol)
- sitemaps.org
Die Angaben entsprechen dem Stand zum Erstellungsdatum. Dokumentation, Richtlinien und Webmaster-Tools der Suchmaschinen ändern sich – prüfen Sie aktuelle Informationen in den Originalquellen.