Focused Crawling bezeichnet einen Crawler, der sich auf besonders themenrelevante und aktuelle Websites fokussiert. Entsprechend steht der Focused Crawler im Gegensatz zur Universalsuchmaschine, deren Ziel es ist möglichst viele im Internet vertretene Websites zu crawlen sowie zu indexieren. Dabei beschränkt sich der Crawler auf eine bestimmte Nische im Web und indexiert sowie crawlt diese Nische besonders detailliert. Themenfremde Websites werden dabei nicht beachtet und dementsprechend auch nicht gecrawlt.
Beim Focused Crawling kommt es vor, dass Websites bevorzugt indexiert und gecrawlt werden, denen eine besonders große Bedeutung im WWW zugeschrieben wird. Wenn diese Websites besonders aktuell gehalten werden, werden diese vom Google Crawler deutlich häufiger indiziert, als diese die selten oder gar nicht aktualisiert werden.
Ziele für die Suchmaschinenoptimierung
In der Suchmaschinenoptimierung hat das Focused Crawling natürlich das Ziel, ein besseres Ranking zu erreichen. Webmaster stehen deshalb vor der Herausforderung regelmäßige unique und aktuelle Inhalte zu veröffentlichen, um vom Focused Crawler besondere Beachtung geschenkt zu bekommen. Werden Seiten weniger häufig aktualisiert, kann sich daraus eine reduzierte Besuchshäufigkeit des Crawlers ergeben und somit auch ein schlechteres Ranking.
Weitere Texte zum Thema:
