Roboter
Im Internet sind Robots (kurz Bots) Suchprogramme, die sich durch die Links des WWW hangeln, um Informationen für Suchmaschinen zu finden, aufzubereiten und mit Hilfe eines Indizierers in Datenbanken zu speichern. Dort können die Inhalte dann über die Frontends der Suchmaschinen abgefragt werden. Andere Bezeichnungen für solche Programme sind Crawler, Spider, Worm oder Agent.
Siehe auch:
Deepcrawler
Freshbot
REP