Spider

Das ist der Eintrag dazu aus unserem IT-Kommunikationslexikon:


Spinne

Im Internet sind Spinnen Suchprogramme, die sich durch die Links des WWW hangeln, um Informationen für Suchmaschinen zu finden, aufzubereiten und mit Hilfe eines Indizierers in Datenbanken zu speichern. Dort können die Inhalte dann über die Frontends der Suchmaschinen abgefragt werden. Andere Bezeichnungen für solche Programme sind Robot (kurz Bot), Worm oder Agent. Da ein gutes Ranking einer Web-Seite in verschiedenen Suchmaschinen eine hohe Bedeutung für die Sichtbarkeit der Seite hat, gibt es mehr und mehr Techniken wie Cloaking, die versuchen, die Arbeit der Spider zu manipulieren.

Siehe auch:
Deepcrawler
Freshbot
REP
Spam-Bot
SRMP

Aktuelle Beiträge

Cloudsicherheit: Google schließt Wiz-Übernahme ab

Angreifer werden schneller, KI macht sie noch gefährlicher – und Google zieht jetzt eine der meistgenutzten Cloud-Sicherheitsplattformen der Welt ins eigene Lager. Wiz bleibt dabei bewusst plattformunabhängig: Die Dienste sollen weiterhin auf AWS, Azure und Oracle Cloud funktionieren und richten sich ausdrücklich auch an Unternehmen, die keine eigene Sicherheitsabteilung aufbauen können.

Spamfaktor von Newslettern testen

Beim Versand von Newslettern oder Rundmails kann schon ein kleiner Konfigurationsfehler dazu führen, dass Nachrichten im Spamfilter landen. Der Onlinedienst "mail-tester.com" hilft dabei, solche Probleme vor dem Versand zu erkennen. Der Service analysiert verschiedene Aspekte der E-Mail – etwa Inhalte, Serverkonfiguration, Authentifizierungsmechanismen und die Reputation der Absender-IP.