Open Source Monitoring mit ConSol Tools & Bausteine

OMD ist eine umfangreiche Open-Source-Monitoring-Lösung, die „Out-of-the-Box“ die Cores Nagios, Naemon und Icinga mit ihren nützlichsten Add-ons zu einem aufeinander abgestimmten Komplettpaket bündelt. Mit dem Site-Konzept lassen sich mehrere vollwertige Installationen auf nur einem Server betreiben. Der Aktualisierungsaufwand für eine komplette Nagios-Installation ist mit OMD minimal. Die ConSol-Mitarbeiter Sven Nierlein und Gerhard Laußer sind von erster Stunde an Mitglieder des OMD-Entwicklerteams omdistro.org. Bei ConSol setzen wir auf die OMD Labs Edition, die OMD mit Cloud-Technologien wie Prometheus, Grafana und VictoriaMetrics ergänzt und so eine leistungsfähige Basis für gemischte Installationen bietet.

Das von ConSol entwickelte Modul Mod-Gearman ermöglicht die verteilte Ausführung von mehreren Tausend Checks und Eventhandlern pro Minute. Diese werden nicht mehr „klassisch“ von Nagios selbst, sondern als ‚Jobs‘ von sogenannten ‚Workern‘ ausgeführt, die sich auch an verschiedenen Standorten weltweit platzieren lassen. Das Ergebnis wird anschließend verschlüsselt zurück an Nagios übermittelt.

Thruk ist ein modernes Web-Interface für Nagios, das auch mit Icinga und Icinga 2 kompatibel ist. Sven Nierlein von ConSol hat es entwickelt, da die klassische Web-Oberfläche von Nagios seit mehreren Jahren kaum weiterentwickelt wurde und den Anforderungen an zeitgemäßes Open Source Monitoring längst nicht mehr genügte. Thruk erleichtert dem Monitoring-Administrator das Leben mit einer Fülle von zusätzlichen Funktionen und nützlichen Hilfen, wie etwa aussagekräftige Dashboards. Thruk kann hunderte verteilte und autarke Monitoring-Instanzen als sogenannte Backends anbinden und fungiert so als unternehmensweite Kommandozentrale, die alle Informationen bündelt und gleichzeitig die Ausführung von Befehlen auf den remote-Systemen ermöglicht.

SNClient ist ein zeitgemäßer Monitoring-Agent für Windows- und Unix-Systeme, der von Sven Nierlein entwickelt wurde. Der Fokus liegt auf schlankem und wartbarem Code, um schnelle Erweiterungen zu ermöglichen und Sicherheitslücken zu vermeiden, wobei vertraute Funktionen des etablierten NSClient++ übernommen wurden. Die Migration von NSClient++ zu SNClient gestaltet sich nahtlos, ohne dass bestehende Konfigurationsdateien angepasst werden müssen. SNClient steht sowohl für Windows als auch für Linux als einheitlicher Agent zur Verfügung. Ein besonderes Highlight ist die Integration von Mod-Gearman, die einen kontinuierlichen Fluss von Check-Aufträgen und -Ergebnissen über eine Warteschlange ermöglicht und die Monitoring-Server erheblich entlastet. SNClient bringt zudem node__exporter und windows_exporter mit und eignet sich damit hervorragend als Agent auch in einem Prometheus-Ökosystem

Das Framework Coshsh von Gerhard Laußer erzeugt automatisch die Konfigurationsdateien für gängige IT-Monitoringsysteme, sei es Nagios, Icinga, Prometheus oder diverse Exporter. Die notwendigen Informationen über Server und Applikationen sowie deren Ansprechpartner und Abhängigkeiten werden dafür aus beliebigen Unternehmensdatenquellen ausgelesen und in Host-, Service- und Contact-Definitionen umgewandelt. Der Vorteil: Inventardaten müssen nur noch von den Server- und Applikationsverantwortlichen gepflegt werden.

Der IT-Monitoring-Newcomer Prometheus ist schon jetzt der de-facto Standard zur Überwachung von Kubernetes- und Openshift-Umgebungen. Aber zum Beispiel auch beim Monitoring von Netzwerk-Geräten kann Prometheus seine Stärken ausspielen. Um Anwendungen und Systeme besonders detailliert überwachen zu können, erfasst das Tool Metriken in sehr kurzen Zeitintervallen und wertet sie regelbasiert aus. Dadurch lassen sich unter anderem komplexe Alarmierungen entwerfen.

Der Klassiker Nagios und seine Nachfolger Naemon und Incinga2 bilden den Kern des IT-Monitorings auf Open-Source-Basis. Alle drei sind seit vielen Jahren im Einsatz und haben sich sowohl bei kleineren Projekten als auch in global verteilten IT-Monitoring-Landschaften bewährt.

Sowohl Naemon-Metriken als auch Prometheus-Metriken werden in VictoriaMetrics gespeichert, das für hohe Performance und geringen Platzbedarf optimiert ist. Visualisierungen und Dashboards können wie gewohnt über Grafana erstellt werden, wodurch selbst sehr große Datenbestände übersichtlich dargestellt werden. ConSol betreibt VictoriaMetrics-Installationen in großen Konzernen im Petabyte-Bereich und verfügt damit über umfangreiche Praxiserfahrung mit extrem großen Datenmengen.

Ansible ist aus der Architektur komplexer Systemlandschaften nicht mehr wegzudenken. Das Automatisierungswerkzeug hilft, Server und viele andere Geräte zu orchestrieren. Mit seiner Hilfe lassen sich die gewünschten Systemzustände leicht und wiederverwendbar definieren. Bei ConSol setzen wir Ansible gezielt ein, um Monitoringlandschaften effizient aufzusetzen, zu konfigurieren und kontinuierlich zu pflegen.

Grafana hat sich schnell zum beliebtesten Werkzeug entwickelt, um Graphen und Dashboards darzustellen. Es kann an eine Vielzahl von Datenquellen angebunden werden, u.a. Prometheus, InfluxDB, Thruk und VictoriaMetrics, aber auch an klassische Datenbanken wie MySQL oder Microsoft SQL. Grafana hilft nicht nur, die erfassten Metriken zu visualisieren, sondern auch, sie besser zu verstehen. Damit ist es in heterogenen IT-Monitoring-Landschaften unverzichtbar.

Für die vier verbreitetsten Datenbanken Oracle, MySQL, DB2 und Microsoft SQL Server hat ConSol Nagios-Plugins entwickelt. Darüber hinaus gibt es jeweils ein Plugin für die komplette Netzwerkwelt, SAP, Storage, Rechenzentrumstechnik und USV. Alle Plugins sind State-of-the-Art und ermöglichen ein einheitliches IT-Monitoring heterogener Systemlandschaften auf Open-Source-Basis.