Spider


Spinne

Im Internet sind Spinnen Suchprogramme, die sich durch die Links des WWW hangeln, um Informationen für Suchmaschinen zu finden, aufzubereiten und mit Hilfe eines Indizierers in Datenbanken zu speichern. Dort können die Inhalte dann über die Frontends der Suchmaschinen abgefragt werden. Andere Bezeichnungen für solche Programme sind Robot (kurz Bot), Worm oder Agent. Da ein gutes Ranking einer Web-Seite in verschiedenen Suchmaschinen eine hohe Bedeutung für die Sichtbarkeit der Seite hat, gibt es mehr und mehr Techniken wie Cloaking, die versuchen, die Arbeit der Spider zu manipulieren.

Siehe auch:
Deepcrawler
Freshbot
REP
Spam-Bot
SRMP

0-9|A|B|C|D|E|F|G|H|I|J|K|L|M|N|O|P|Q|R|S|T|U|V|W|X|Y|Z|alle

Suche im Lexikon nach im

 

Fachartikel

Nicht-relationale Datenbanken beschleunigen Big-Data-Analysen [18.01.2017]

Herkömmliche Datenverarbeitungsprozesse auf Basis relationaler Datenbanken genügen im Zeitalter von Big Data häufig nicht mehr, um die riesigen Datenmengen aus unterschiedlichsten Quellen in angemessener Zeit zu analysieren und Erkenntnisse daraus gewinnen zu können. Im schlimmsten Fall lassen sich dann neue Geschäftsmodelle nicht angemessen realisieren. Der Artikel zeigt, wie Unternehmen mithilfe moderner Datenaggregationsmethoden und nicht-relationaler Datenbanken dieses Problem lösen und Wettbewerbsvorteile gewinnen können. [mehr]

Grundlagen

Speicherreplikation in Windows Server [12.01.2017]

Eine der wichtigsten neuen Funktionen in Windows Server 2016 ist die Speicherreplikation, von Microsoft als Storage Replica bezeichnet. Mit dieser Technologie lassen sich ganze Festplatten blockbasiert zwischen Servern replizieren, auch zwischen verschiedenen Rechenzentren sowie der Cloud und einem Rechenzentrum. Wir erklären, was Storage Replica zu bieten hat und wie sie funktioniert. [mehr]

Buchbesprechung

SQL Hacking

von Justin Clarke et al.

Aktuelle Nachricht

Aktuelle Admin-Jobs

SMS group - SOFTWAREINGENIEUR / INBETRIEBNEHMER ELEKTROTECHNIK (m/w)

(Witten, Deutschland) SMS group GmbH ist ein international tätiges Unternehmen des Anlagen- und ... [mehr]

USU Software AG - Technischer Consultant (m/w) IT-Service-Management

(Möglingen, Deutschland) Als dynamisch wachsendes Unternehmen des IT-Mittelstandes suchen wir ... [mehr]

e.optimum AG - IT Entwickler als System- und Netzwerkadministrator (m/w)

(Offenburg, Deutschland) Sie haben eine abgeschlossene IT Berufsausbildung oder vielfältige, mehrjährige ... [mehr]