Logzoom: schnellerer Ersatz für Logstash

08.04.2016

Weil Logstash und Fluentd nicht die Anforderungen erfüllten, hat die Firma Packetzoom einen Ersatz dafür geschrieben und unter einer freien Lizenz veröffentlicht. 

Die Firma Packetzoom hat unter dem Namen Logzoom einen Ersatz für die Log-Aggregatoren Logstash und Fluentd veröffentlicht. Wie viele andere Firmen erhebt auch Packetzoom eine Vielzahl von Performancedaten und speichert diese mit Hilfe von Log-Aggregatoren in einem Storage-Backend, das eine Auswertung der Daten erlaubt. Dabei hat Packetzoom sowohl Logstash wie auch Fluentd getestet und für unzureichend befunden. 

Logstash hat beispielsweise als Ruby-Anwendung auf der Java Virtual Machine (JVM) sehr viel Speicher und Rechenzeit verbraucht. Ähnlich fiel das Testergebnis mit Fluentd aus: stetig anwachsender Speicher, Programm-Crashes und kein Multicore-Support. Also fingen die Entwickler bei Packetzoom an, einen eigenen Log-Aggregator in der Programmiersprache Go zu entwickeln. 

Logzoom bezieht die Log-Daten von dem Logstash-Forwarder Filebeat über das Lumberjack-Protokoll. Logzoom speichert die Logging-Daten dann beispielsweise in Elasticsearch oder dem Amazon-Backend S3. Logzoom verarbeitet selber keine Log-Daten, sie müssen also bereits im richtigen Format von der Anwendung angeliefert werden, etwa ein Zeitstempel. Für fehlertolerante Setups unterstüzt Logzoom die Message-Queue RedisMQ. 

Der Quellcode und Installationshinweise sind im Logzoom-Github-Repository zu finden. 

comments powered by Disqus

Artikel der Woche

Zertifikatsmanagement mit Certmonger

Zertifikate werden dazu verwendet, um Benutzer, Services und Hardware mit der Hilfe eines signierten Schlüssels zu verifizieren. Hierfür existieren Public-Key-Infrastrukturen (PKI). Aber wie gelangen die Zertifikate eigentlich auf das Ziel-Gerät? Der Open-Source-Tipp in diesem Monat beschreibt, wie Sie für diese Aufgabe das Tool certmonger verwenden können. (mehr)
Einmal pro Woche aktuelle News, kostenlose Artikel und nützliche ADMIN-Tipps.
Ich habe die Datenschutzerklärung gelesen und bin einverstanden.

Linux-Backup

Welche Backup-Lösung setzen Sie für Linux im professionellen Umfeld ein?

  • keine
  • eigene Scripts
  • rsnapshot
  • rdiff-backup
  • Bacula
  • Bareos
  • Borg
  • Duplicity
  • Amanda
  • Burp
  • Clonezilla
  • Acronis
  • Arkeia
  • SEP sesam
  • Veeam
  • Redo Backup
  • Relax-and-Recover
  • andere kommerzielle Software
  • andere Open-Source-Software

Google+

Ausgabe /2017

Microsite