Gefundene Links prüfen
Bei jedem Lauf erstellt ein Datenerfassungsjob eine Karte aller URLs, die er unterwegs gefunden hat – nicht nur der erfassten Seiten, sondern auch der Links, die er gesehen und bewusst nicht verfolgt hat. Das ist die Liste Discovered links, und sie ist der schnellste Weg zu verstehen, was der Job tatsächlich getan hat.
Bevor Sie beginnen
- Öffnen Sie einen Website- (oder Such-)Datenerfassungsjob, der mindestens einen Lauf abgeschlossen hat.
Schritte
- Öffnen Sie die Detailseite des Jobs unter Datenerfassung.
- Wählen Sie den Tab Discovered links. Die Liste zeigt jede URL, auf die der Job bei seinem letzten Lauf gestoßen ist.
- Gehen Sie die URLs durch, um zu bestätigen, dass die erwarteten Seiten vorhanden sind. Jeder Eintrag zeigt die URL, ob sie verarbeitet oder übersprungen wurde und wie sie gefunden wurde (von welcher Seite verlinkt).
- Achten Sie auf überraschende Einträge – Seiten außerhalb des gewünschten Umfangs oder wichtige Seiten, die als übersprungen erscheinen. Diese Signale zeigen Ihnen, ob die Umfangseinstellungen angepasst werden müssen.
Das Ergebnis prüfen
Die gewünschten Seiten sollten mit dem Status „verarbeitet“ in der Liste erscheinen. Fehlen wichtige Seiten, müssen die Hostnamen, Pfadregeln oder die Crawl-Tiefe des Jobs eventuell erweitert werden. Sind unerwünschte Seiten hineingeraten, ist der Umfang zu weit gefasst.
Fehlerbehebung
- Fehlen wichtige Links? Erweitern Sie die Hostnamen, lockern Sie die Regeln für eingeschlossene Pfade oder erhöhen Sie die Crawl-Tiefe.
- Sehen Sie Links, die Sie nicht möchten? Fügen Sie eine Regel für ausgeschlossene Pfade hinzu, um sie beim nächsten Lauf herauszufiltern.