Deepcrawler


Ein Deepcrawler ist ein Crawler (Bot, Spider), der eine Tiefenindizierung im WWW vornimmt. Wegen der großen Datenmenge kann diese nur in größeren Zeitabständen stattfinden. Die Bezeichnung Deepcrawler wird zur Abgrenzung von Freshbot benutzt.

Aktuelle Beiträge