Bots

Bots (oder Spiders, Crawlers) sind Programme der Suchmaschinen. Sie bewegen sich über die Hyperlinks auf Webseiten durch das Internet. So werden sämtliche zugänglichen Dokumente erfasst, um sie später in den Suchmaschinenindex aufnehmen zu können.