Focused Crawler

Aus Online Marketing Wiki
Wechseln zu: Navigation, Suche


Ein Focused Crawler ist ein themenfokussierter Suchmaschinen-Crawler. Anders als ein Universal Crawler, der das gesamte Web durchsucht, beschränken sich Focused Crawler darauf, punktuell einzelne Bereiche des Webs zu durchsuchen und dabei ausschließlich solche Webseiten zu indizieren, die thematisch relevant sind oder besonders häufig aktualisiert werden.

Wie oft eine Webseite von einem Focused Crawler besucht wird, ist davon abhängig, wie häufig dort aktualisierte Inhalte bereitgestellt werden. Wird eine Webseite in regelmäßigen Intervallen bearbeitet und aktualisiert, so werden diese auch ebenso regelmäßig von einem Focused Crawler besucht, damit die aktualisierten Inhalte im Suchindex zur Verfügung stehen. Wird eine Webseite dahingegen seltener oder garnicht mehr aktualisiert, reduzieren sich auch die Besuchsintervalle des Focused Crawlers.

Ziel des Einsatzes von Focused Crawler ist es nicht nur, dem Internetnutzer möglichst themenrelevante und aktuelle Suchergebnislisten zu liefern. Darüber hinaus sollen unter Einsatz eines möglichst geringen Rechenaufwands die verfügbaren Ressourcen der Suchmaschinen geschont werden, die bei dem fortschreitenden Wachstum des Webs kaum alle Webseiten in ihren Suchindex aufnehmen können. Vorrangig sollen daher wichtige Webseiten mit einem qualitativ hochwertigen Content erfasst werden.

Focused Crawling und SEO

Durch die Bereitstellung von relevanten und aktuellen Inhalten können Webseitenbetreiber sicherstellen, dass ihre Webseite häufig vom Focused Crawler besucht und mit einem entsprechend guten Ranking in den Suchindex von Google aufgenommen wird. Umgekehrt gilt: Wird der Content einer Webseite vom Focused Crawler nicht als relevant erachtet, etwa weil dieser nur selten oder gar nicht bearbeitet und aktualisiert wird oder dieser dem Nutzer keinen Mehrwert bietet, reduziert sich die Besuchshäufigkeit des Focused Crawlers, was mit einer Herabstufung eines vormals guten Rankings einer Webseite im Suchindex führen kann.