Man sucht eine Anzeige, die man am Vortag auf Affaires du Jour entdeckt hat, kehrt auf die Website zurück – und die Seite scheint verschwunden zu sein. Weder das Hauptmenü noch die interne Suchleiste führen zum gewünschten Inhalt. Bevor man davon ausgeht, dass die Seite gelöscht wurde, gibt es mehrere Möglichkeiten, sie aufzuspüren. Als Erstes sollte man verstehen, was die Sitemap tatsächlich anzeigt – und was nicht.
HTML-Navigationsseite und XML-Sitemap: zwei Werkzeuge, die nicht dieselben URLs auflisten
Der häufigste Irrtum beim Erkunden einer Website wie Affaires du Jour ist die Annahme, dass eine einzige Seite alle vorhandenen URLs enthält. Tatsächlich erfüllen die sichtbare Sitemap und die XML-Sitemap unterschiedliche Aufgaben.
Die HTML-Sitemap ist eine für Besucher konzipierte Navigationsseite. Sie ordnet die wichtigsten Rubriken und bietet Zugang zu Kategorien, Unternehmensseiten und den meistbesuchten Bereichen. In der Regel erreicht man sie über die Fußzeile oder direkt über die Sitemap von Affaires du Jour.
Die XML-Sitemap hingegen ist eine technische Datei für Suchmaschinen. Sie übermittelt Google oder Bing URLs, damit diese leichter gecrawlt werden können. Die Datei garantiert weder, dass alle Seiten der Website darin aufgeführt sind, noch, dass die aufgeführten Seiten tatsächlich indexiert werden. Eine Seite kann auf dem Server vorhanden sein, ohne in einer der beiden Sitemaps zu erscheinen.
- Die HTML-Sitemap listet Rubriken und Seiten auf, die für die menschliche Navigation als nützlich erachtet werden – häufig nur eine Auswahl der Website
- Die XML-Sitemap enthält URLs für Suchmaschinen-Bots. Ihr Inhalt hängt jedoch von der technischen Konfiguration der Website ab (SEO-Plugin, CMS-Einstellungen)
- Manche Seiten (abgelaufene Anzeigen, archivierte Inhalte, gefilterte Ergebnisseiten) erscheinen weder in der einen noch in der anderen Sitemap
Wenn eine Seite in der HTML-Sitemap nicht zu finden ist, sollte man als Nächstes die XML-Sitemap überprüfen. Bei einer WordPress-Website lauten die üblichen Pfade /sitemap.xml oder /wp-sitemap.xml. Auch die robots.txt-Datei im Stammverzeichnis der Domain kann die genaue Adresse der Sitemap enthalten.

Eine Seite, die in der Sitemap fehlt, mit Googles site:-Operator finden
Die HTML-Sitemap wurde durchsucht, die XML-Sitemap überprüft – doch die Seite bleibt unauffindbar. Bevor man zu dem Schluss kommt, dass sie entfernt wurde, sollte man eine zusätzliche Prüfung direkt bei Google vornehmen.
Mit dem Operator site: gefolgt vom Domainnamen und aussagekräftigen Begriffen lässt sich der Google-Index nach einer bestimmten Website durchsuchen. Gibt man beispielsweise site:affairesdujour.com gefolgt von einigen Schlüsselwörtern zur Anzeige oder gesuchten Seite in die Suchleiste ein, erhält man ausschließlich die von Google indexierten Ergebnisse dieser Domain.
Diese Methode hat eine klare Einschränkung: Sie zeigt nur Seiten an, die Google gecrawlt und in seinem Index gespeichert hat. Wurde die Seite erst kürzlich veröffentlicht oder enthält sie eine noindex-Anweisung, erscheint sie nicht in den Ergebnissen – selbst wenn sie auf dem Server vorhanden ist.
Eine unauffindbare von einer nicht indexierten Seite unterscheiden
Hier entsteht besonders häufig Verwirrung. Keine Google-Ergebnisse zu finden, beweist nicht, dass eine Seite gelöscht wurde. Möglicherweise wurde sie einfach nicht indexiert. Das kann verschiedene konkrete Gründe haben.
- Die Seite ist zu neu, als dass Googles Bots sie bereits besucht hätten
- Ein Meta-Robots-Tag mit dem Wert noindex verhindert, dass die Seite in den Suchergebnissen erscheint
- Von keiner anderen Seite der Website führt ein Link zu der Seite, sodass sie für Crawler unsichtbar bleibt
- Der Inhalt wurde geändert oder mit einer anderen Seite zusammengeführt, und die alte URL leitet unbemerkt weiter
Um Klarheit zu schaffen, kann man die URL direkt in die Adressleiste des Browsers eingeben. Gibt die Seite einen 404-Fehler zurück, wurde sie gelöscht oder verschoben. Wird sie normal angezeigt, ist sie weiterhin vorhanden, wird aber in den Navigationselementen der Website nicht aufgeführt.
Die Sitemap von Affaires du Jour durchsuchen: eine schnelle Methode zum Auffinden
Eine gut strukturierte HTML-Sitemap lässt sich schneller durchsuchen, wenn man die integrierte Suchfunktion des Browsers verwendet. Auf der Sitemap-Seite öffnet die Tastenkombination Strg+F (oder Cmd+F auf dem Mac) ein lokales Suchfeld, das den angezeigten Inhalt in Echtzeit filtert.
Man gibt ein Schlüsselwort zur gesuchten Seite ein (den Namen einer Rubrik, einen Begriff aus der Anzeige oder eine Kategorie), und der Browser hebt jedes Vorkommen auf der Seite hervor. Diese Methode eignet sich besonders gut, wenn die Sitemap mehrere Dutzend thematisch geordnete Links enthält.
Ist die Sitemap auf mehrere Seiten verteilt oder wird sie dynamisch geladen (Links erscheinen erst beim Scrollen), findet Strg+F nur Inhalte, die bereits auf der Seite geladen wurden. In diesem Fall empfiehlt sich wieder der site:-Operator bei Google. Er ist nach wie vor die umfassendste Methode, um alle indexierten Seiten zu durchsuchen.

Wenn eine Seite tatsächlich verschwunden ist: Cache und Archive prüfen
Wenn die URL einen 404-Fehler zurückgibt und der site:-Operator keine Ergebnisse liefert, wurde die Seite wahrscheinlich entfernt. Es gibt noch zwei Möglichkeiten, auf ihren Inhalt zuzugreifen.
Google speichert vorübergehend eine Cache-Version der meisten indexierten Seiten. Klickt man neben einem Suchergebnis auf die drei Punkte, kann man manchmal auf die von Google gespeicherte Cache-Version zugreifen. Sie entspricht der letzten Kopie, die beim Besuch des Crawlers gespeichert wurde.
Eine weitere Möglichkeit ist die Wayback Machine auf archive.org, die in unregelmäßigen Abständen Momentaufnahmen von Webseiten archiviert. Dort fügt man die vollständige URL ein und kann die verfügbaren, nach Datum sortierten Aufnahmen aufrufen. Der wiederhergestellte Inhalt ist oft unvollständig (fehlerhaftes Layout, fehlende Bilder), doch der Haupttext ist in den meisten Fällen weiterhin lesbar.
Mit diesen beiden Methoden lässt sich die Seite nicht wieder online bringen. Sie ermöglichen jedoch den Zugriff auf die darin enthaltenen Informationen – oft reicht das aus, wenn man nach einer bestimmten Angabe, einem Kontakt oder den Details einer Anzeige gesucht hat.
Entscheidend ist die Unterscheidung zwischen einer gelöschten Seite (bestätigter 404-Fehler), einer vorhandenen, aber in der Sitemap fehlenden Seite (über die direkte URL erreichbar) und einer von Google nicht indexierten Seite (auf der Website vorhanden, aber in den Suchergebnissen unsichtbar). Die URL im Browser zu testen, bevor man weitere Schritte unternimmt, spart Zeit und verhindert, dass man an der falschen Stelle sucht.



