Um verwaiste Seiten auf einer Website zu finden, reicht es nicht, die Website einfach von der Startseite aus crawlen zu lassen: Seiten, auf die tatsächlich keine internen Links verweisen, erscheinen häufig nicht in den Ergebnissen dieses Crawls. Effektiver ist es, die Website mit einem Tool zur Optimierung interner Verlinkungen zu crawlen und die Ergebnisse mit der Sitemap, einer Seitenliste aus dem Backend und Suchdaten abzugleichen. So lassen sich URLs finden, für die zwar Seiteneinträge vorhanden sind, aber keine internen Einstiegslinks gefunden wurden.
Wenn Sie Kandidatenseiten gefunden haben, sollten Sie nicht sofort überall Links ergänzen. Prüfen Sie zunächst, ob die Seiten öffentlich zugänglich sein sollen und ob es sich lohnt, sie beizubehalten. Fügen Sie anschließend von relevanten Seiten aus Einstiegslinks hinzu, die Nutzer nachvollziehen können. So verbessern Sie sowohl die Website-Navigation als auch die Chancen, dass Suchmaschinen die Seiten entdecken.
Als verwaiste Seite gilt üblicherweise eine Seite, auf die keine andere auffindbare Seite der Website per Link verweist. Sie kann weiterhin über die direkte Eingabe der URL, externe Links oder Suchergebnisse aufgerufen werden. Dass sie erreichbar ist, bedeutet daher nicht, dass es einen internen Einstiegslink zu ihr gibt.
Legen Sie vor dem Crawling den Umfang der Prüfung fest: Soll die gesamte Website, eine Sprachversion oder ein Produktverzeichnis beziehungsweise Inhaltsbereich geprüft werden? Führen Sie anschließend möglichst viele der folgenden Datenquellen zusammen:
Tragen Sie die URLs in einer gemeinsamen Tabelle zusammen und kennzeichnen Sie ihre jeweilige Quelle. Vergleichen Sie sie anschließend mit den Crawl-Ergebnissen. Wenn beispielsweise eine Produktseite im Backend und in der Sitemap vorhanden ist, aber beim Crawling ab der Startseite nicht gefunden wird, sollte sie genauer geprüft werden. Vereinheitlichen Sie Unterschiede bei Domain, Groß- und Kleinschreibung, abschließendem Schrägstrich, Parametern und Weiterleitungen, damit verschiedene Adressen derselben Seite nicht fälschlich als mehrere Seiten gelten.

Wählen Sie ein Tool, das Website-Crawling, die Auswertung interner Links sowie den Import oder Abgleich externer URL-Listen unterstützt. Die Bezeichnungen der Menüs können sich je nach Tool unterscheiden, der grundlegende Ablauf ist jedoch derselbe:
„Keine eingehenden Links“ bedeutet hier, dassim Rahmen des aktuellen Crawls keine eingehenden Links gefunden wurden. Das heißt nicht zwangsläufig, dass auf der gesamten Website keine Links auf die Seite verweisen. Einschränkungen bei der Crawltiefe, nicht einbezogene Subdomains oder Seiten, für die eine Anmeldung erforderlich ist, können die Ergebnisse beeinflussen. Wenn die Website-Navigation oder Produktlisten mithilfe von JavaScript geladen werden, sollten Sie außerdem prüfen, ob das Tool diese Inhalte rendern kann. Andernfalls werden tatsächlich vorhandene Links möglicherweise nicht erfasst.
Rufen Sie die Kandidaten-URLs auf und beurteilen Sie die Seiten anhand ihrer Funktion. Produktseiten, Lösungsseiten oder Artikel, die über die organische Suche neue Kunden gewinnen sollen, sollten in der Regel über relevante Kategorien oder Inhalte erreichbar sein. Landingpages für Werbekampagnen, Seiten nach der Anmeldung oder temporäre Aktionsseiten können dagegen einen eigenen Zugangsweg haben und müssen nicht unbedingt in die öffentliche Navigation aufgenommen werden.
Prüfen Sie zugleich den Seitenstatus und die Versionsbeziehungen. Bei einer alten, fehlerhaften Adresse, einer bereits weitergeleiteten URL oder einer Seite mit doppelten Parametern sollten Sie nicht einfach interne Links ergänzen. Legen Sie bei Duplikaten zunächst fest, welche Version beibehalten werden soll, und richten Sie die internen Links auf diese Version aus. Bei Seiten mit noindex oder einem kanonischen Link auf eine andere Adresse sollte die jeweilige Konfiguration im Kontext der tatsächlichen Nutzung beurteilt werden. Diese Einstellungen bedeuten für sich genommen nicht, dass die Seite keine internen Links hat.
Bei mehrsprachigen Websites sollten Sie besonders auf die passende Sprache und Region achten. Eine englischsprachige Produktseite sollte vorzugsweise von englischsprachigen Produktkategorien oder thematisch passenden Artikeln aus erreichbar sein. Fügen Sie nicht allein deshalb massenhaft englische Links in chinesische Inhalte ein, weil die chinesische Seite Besucher hat. Zwischen Sprachversionen können Links zur Sprachauswahl eingerichtet werden, sie ersetzen jedoch keine klare Inhaltsstruktur in den jeweiligen Sprachversionen.
Suchen Sie für Seiten, die beibehalten und öffentlich zugänglich gemacht werden sollen, zunächst nach Quellseiten mit ähnlichem Thema, die Nutzer aus nachvollziehbarem Grund weiterführen. Eine Produktdetailseite kann von der passenden Kategorieseite, einer Anwendungsseite oder einem thematisch relevanten technischen Artikel aus verlinkt werden. Ein Einkaufsratgeber kann über eine passende Produktseite oder einen Wissensbereich erreichbar sein. Der Linktext sollte den Inhalt der Zielseite beschreiben, zum Beispiel „Edelstahlventil-Spezifikationen ansehen“ statt „Hier klicken“ in großer Zahl zu verwenden.
Verwenden Sie nach Möglichkeit normale HTML-Links, denen sowohl Nutzer als auch Suchmaschinen folgen können. Prüfen Sie nach dem Hinzufügen, ob die Zieladresse erreichbar ist, zur erwarteten Seite weiterleitet und die Links auf der Seite nicht durch Anmeldebeschränkungen oder Probleme beim Laden von Skripten beeinträchtigt werden. Häufen Sie nicht wahllos Links auf thematisch unpassenden Seiten an, nur um die Zahl der eingehenden Links zu erhöhen. Solche Einstiege können den Lesefluss stören und Nutzern kaum dabei helfen, den nächsten Schritt zu machen.
Wenn eine Kandidatenseite veraltet ist oder sich stark mit anderen Inhalten überschneidet, kann es sinnvoller sein, sie zu aktualisieren, zusammenzuführen oder zu entfernen, falls sie nicht mehr benötigt wird, anstatt weitere Einstiegslinks hinzuzufügen. Bei älteren Seiten mit bestehenden externen Links oder Suchtraffic sollten Sie vor Änderungen zunächst die Zugriffswege bewerten und gegebenenfalls eine Weiterleitung einrichten.
Crawlen Sie nach Abschluss der Änderungen die betreffenden Verzeichnisse erneut und prüfen Sie, ob das Tool die neuen Links erkennt und sich die Anzahl interner eingehender Links der Zielseite geändert hat. Rufen Sie die Seite anschließend manuell über den tatsächlichen Einstiegslink auf und prüfen Sie, ob Linktext, Sprachversion und Zielseite den Erwartungen entsprechen. Bei Seiten, die auf Suchtraffic angewiesen sind, können Sie die Crawling-, Indexierungs- und Impressiondaten in Such-Tools kontinuierlich beobachten. Das Hinzufügen interner Links garantiert jedoch weder eine sofortige Indexierung noch bessere Rankings.
Planen Sie die Prüfung im Rahmen der laufenden Website-Pflege beispielsweise nach einem Website-Relaunch, umfangreichen Änderungen am Produktangebot oder der Aktualisierung von Sprachversionen ein. Unternehmen, die intelligente Website- und Marketingplattformen nutzen, können zunächst prüfen, ob sich im Backend eine Seitenliste exportieren und Seitenlinks bearbeiten lassen, und anschließend nach dem beschriebenen Ablauf ein Crawling-Tool hinzuziehen. Bei einer kleinen Zahl von Seiten reichen ein Backend-Export und ein Tabellenabgleich in der Regel aus. Bei großen oder häufig aktualisierten Websites erleichtern Tools, die den Import mehrerer Datenquellen und regelmäßige Crawls unterstützen, die kontinuierliche Pflege.
Verwandte Artikel
Verwandte Produkte


