Start / Stichwort zu Crawling

Stichwort zu Crawling

Ein Webcrawler ist ein Computerprogramm, das automatisch das World Wide Web durchsucht und Webseiten analysiert. Webcrawler werden vor allem von Suchmaschinen eingesetzt. Weitere Anwendungen sind das Sammeln von Web-Feeds, E-Mail-Adressen oder von anderen Informationen.
Webcrawler sind eine spezielle Art von Bots, d. h. Computerprogrammen, die weitgehend autonom sich wiederholenden Aufgaben nachgehen.

Google macht SEO schwieriger

Laut dem obersten Qualitätswächter von Google soll der Bot geändert werden, um eine Über-Optimierung im Ranking zu benachteiligen. Dadurch soll nach Panda die Qualität der Suchergebnisse erhöht werden. Um zu verstehen, was Matt Cutts damit meint, muss man zuerst einiges erklären. Bei der Aussage wird vom Bot und nicht vom …

Jetzt lesen »