Grundlagen

Log-Management

Mit Virtualisierung und Cloud-Umgebungen wächst üblicherweise die Zahl der Server und Dienste. Wenn alle diese ihre Aktivitäten protokollieren, sieht sich der Administrator einer immer größeren Menge an Log Files gegenüber. Log-Management hilft hierbei den Überblick zu behalten.
Wer Ordnung in den Wust seine Logs bringen möchte, braucht leistungsfähige Management-Tools, die dabei helfen, Log-Daten zu sammeln und auszuwerten. Je nach Anforderung gibt es dafür verschiedene Lösungen.

Zunächst einmal stellt sich die Frage nach der Qualität der geloggten Daten. Am einfachsten sind in jedem Fall Log-Dateien im Textformat zu verarbeiten. Nicht nur Windows setzt aber bei seinem Event-Log auf Binärdaten, auch das moderne Linux-Init-System Systemd verwendet mittlerweile Binär-Logs - sehr zum Leidwesen vieler Administratoren.

Bei Linux- und Unix-Systemen gibt es mit Syslog einen Quasi-Standard, der es erlaubt, von verschiedenen Diensten die Log-Daten an einen zentralen Service zu schicken. Da diverse Syslog-Implementierungen wie Rsyslog netzwerkfähig sind, kann dies auch ein zentraler, darauf spezialisierter Server übernehmen - der erste Schritt zum Log-Management. So schicken etwa Mailserver wie Postfix ihre Protokoll an Syslog, das daraus eine Log-Datei macht. Weitere Tools wie Logrotate sorgen dafür, dass beispielsweise für jeden Tag eine neue Datei angefangen wird. Das funktioniert beispielsweise auch mit dem Apache-Webserver, der aber seine Logs lieber selber auf die Platte schreibt.

Noch komfortabler wird die Sache, wenn zum Log-Management  spezialisierte Software zum Einsatz kommt. Sie beherrscht im Optimalfall verschiedene Log-Formate, normalisiert die Daten und speichert sie zur späteren Auswertung ab. Sie bietet die Möglichkeit, Log-Daten nach bestimmten Kriterien zu filtern und zu sortieren. Auch eine Suche ist oft Bestandteil des Funktionsumfangs. Um die Logs verschiedener Programme zu verarbeiten, bringt Log-Management-Software meist Parser mit, die das jeweilige Format verstehen. Ist ein Format nicht unterstützt, kann der Anwender oft mit Regular Expressions Regeln schreiben, die Log-Zeilen verarbeiten.

Im Bereich von Security-Software hat sich hierbei noch eine weitere  Spezialisierung ergeben, das Security Incident und Event Monitoring (SIEM). Hierbei werden Logs und andere Event-Quellen überwacht, korreliert und mit Mustern in einer Datenbank verglichen, um möglichen Einbrüchen und anderen Sicherheitsproblemen auf die Spur zu kommen. Ein Beispiel aus der Open Source-Welt ist OSSIM, das mit AlienVault ein kommerzielles Gegenstück besitzt.

Eventkorrelierung ist auch in anderen Fällen nützlich, zum Beispiel beim Performance-Monitoring. Dazu gibt es beispielsweise die kostenlose Lösung Simple Event Correlator [1], die Log-Dateien überwacht, auf vom Anwender vorgegebene Muster untersucht und gegebenenfalls mit anderen Log-Daten korreliert.

In der Open Source-Welt gibt es für Log-Management eine große Auswahl an Programmen wie Logstash, Octopussy oder Graylog (siehe dazu IT-Administrator 03/2015 [2]), doch auch Monitoring-Systeme können diese Aufgabe übernehmen. Neben kommerziellen On Premise-Lösungen bieten Hersteller heute auch häufig Log-Management als Service an. 
12.03.2015

Nachrichten

HPE kauft Anbieter hyperkonvergenter Infrastruktur SimpliVity [19.01.2017]

Hewlett Packard Enterprise kauft SympliVity, einen Anbieter hyperkonvergenter Infrastrukturen. Die Software des 2009 gegründeten US-Unternehmen vereint Rechnerkapazitäten, Storage und Netzwerk unter einem Dach und mit zentraler Administration. Der Kaufpreis soll 650 Millionen US-Dollar betragen. [mehr]

Mehr Datenschutz für Windows [11.01.2017]

Microsoft hat zwei Neuheiten angekündigt, die den Schutz der Privatsphäre mit Windows 10 verbessern sollen: Ein neues Online-Dashboard zur zentralen Steuerung von Aktivitätsdaten sowie eine einfachere Konfiguration von Datenschutzeinstellungen im Rahmen des angekündigten Creators Update, das im Frühjahr verfügbar wird. [mehr]

Tipps & Tools

PST-Dateien von alten Meetings befreien [19.01.2017]

Microsoft Outlook legt E-Mails und auch Termine in PST-Dateien ab. Alte E-Mails lassen sich je nach Ordnerstruktur recht schnell löschen oder archivieren. Die meisten Termine sind zwar nur ein Texteintrag, blähen aber mit Jahre zurückreichenden Verabredungen die PST-Datei unnötig auf. Durch den Kalender zu scrollen und einzelne Termine zu löschen, ist allerdings arg umständlich. Mit einem kleinen Handgriff und der richtigen Ansicht können Sie sämtliche eingetragenen alten Termine komplett löschen. [mehr]

Download der Woche: PDFsam Basic [17.01.2017]

Was die originalgetreue Darstellung von Dokumenten betrifft, sind PDF-Dateien heute der Standard. Damit geht jedoch einher, dass die Dateien bei der Darstellung in einem PDF-Viewer zunächst einmal nicht veränderbar sind. Für Modifikationen ist dann eine meist kostenpflichtige PDF-Suite nötig. Wer hier auf Ballast verzichten will, sollte einen Blick auf 'PDFsam Basic' werfen. Das Herausnehmen einzelner Seiten etwa stellt mit dem kostenfreien Tool kein Problem dar. [mehr]

Begrünter USB-Hub [14.01.2017]

Buchbesprechung

SQL Hacking

von Justin Clarke et al.

Anzeigen