DOAG Regionaltreffen Dresden,

Transkript

1 Logging in einem Rechenzentrum

2 Agenda Administrative Fragestellungen zu überwachende Komponenten Möglichkeiten der Log-Auswertung Aufbewahrung von Log-Informationen Werkzeug zur grafischen Log-Auswertung Fragen

3 Administrative Fragestellungen Läuft im Verantwortungsbereich alles so, wie es soll? Waren alle automatisierten Aktionen erfolgreich? Sind unsere Systeme in Ordnung? Was passiert mit den Loginformationen?

4 Seit jeher werden Statusinformationen aller Komponenten eines Rechenzentrums in Logdateien protokolliert. Das Auswerten ellenlanger Logdateien ist für jeden Administrator Tag für Tag eine harte Geduldsprobe. Wer regelmäßig verschiedene Logdateien und formate auswerten muss, darf sich in zahlreiche verschiedene Programme einarbeiten. Grafische Admin-Werkzeuge aller Komponenten werten diese Logdateien aus und geben einen aufbereiteten Überblick über die jeweiligen Log-Informationen.

5 Logdatei Eine Logdatei (engl. log file, auch Ereignisprotokolldatei genannt) enthält das automatisch geführte Protokoll aller oder bestimmter Aktionen von Prozessen auf einem Computersystem. Logdatei Quelle: Eine Logdatei ist eine Datei mit der Prozesse, die in Computern und Netzwerken ablaufen, aufgezeichnet werden. Logdateien sind wichtige Informationsquellen, um die aktuelle Situation in einem Netzwerk zu erfassen. Quelle:

6 Verantwortungsbereich Was gehört zum Verantwortungsbereich? Infrastruktur Hardware Netzwerk Middleware Datenbanken Storage Backup

7 Verantwortungsbereich am Beispiel eines mittelständischen Online-Händlers

8 zu überwachende Verantwortungsbereich Hosts am Beispiel eines mittelständischen Online-Händlers

9 zu überwachende Verantwortungsbereich Hosts Anzahl : 10 x Linux 3 x Sun Solaris 3 x Windows Server - 16 Host Betriebssysteme Nicht berücksichtigt ist weitere Infrastruktur, wie z.b. Backupserver, LAN-Technik, SAN-Technik usw. am Beispiel eines mittelständischen Online-Händlers

10 zu überwachende Verantwortungsbereich Anwendungen am Beispiel eines mittelständischen Online-Händlers

11 zu überwachende Verantwortungsbereich Anwendungen Anzahl : 16 x Backup-Client 10 x Server-Anwendungen (Firewall, Webserver, Applicationserver, Terminalserver, Mail, Virus-Scan, Fileserver, 26 Anwendungen am Beispiel eines mittelständischen Online-Händlers

12 zu überwachende Verantwortungsbereich Datenbankanwendungen am Beispiel eines mittelständischen Online-Händlers

13 zu überwachende Verantwortungsbereich Datenbankanwendungen Anzahl : 2 x Knoten eines Real Application Cluster 2 x Instanz einer RAC-DB 2 x Knoten eines MySQL Cluster 2 x MySQL-DB 1 x Microsoft SQL Server 1 x Oracle XE (Express Edition) - 10 Datenbankanwendungen am Beispiel eines mittelständischen Online-Händlers

14 zu überwachende Verantwortungsbereich automatisierte Aktionen Anzahl : 3 x Oracle RMAN Backup (Full, Inc., Alog) 1 x Oracle logischer Export 1 x Datenreplikation in Referenzdatenbank 1 x MySQL Export 16 x Filesystem Backup 4 x Schnittstelle zu Fremdsystemen am Beispiel eines mittelständischen Online-Händlers (ebay, Amazon MarketPlace, Lieferanten) - 26 automatisierte Aktionen

15 Gesamt zu überwachende Komponenten: Verantwortungsbereich 16 Host Betriebssysteme 10 Datenbankanwendungen 26 Anwendungen 26 automatisierte Aktionen - 78 Komponenten Viele dieser Komponenten benutzen EINE Logdatei. Elemente, wie zum Beispiel Oracle (RAC-) Datenbanken, Apache Webserver oder Betriebssysteme stellen deutlich mehr essentielle Log- und Tracedateien zur Verfügung. In den folgenden Beispielen wird von einer Mindestanzahl von 100 wichtigen Logdateien ausgegangen. am Beispiel eines mittelständischen Online-Händlers

16 zurück zu den Fragen Läuft im Verantwortungsbereich alles so, wie es soll? Waren alle automatisierten Aktionen erfolgreich? Sind unsere Systeme in Ordnung? Was passiert mit den Loginformationen?

17

18

19 Die Möglichkeiten im Vergleich: Zusätzliche Ressourcen erforderlich Login auf mehreren Servern notwendig Statusübersicht über ALLE Logdateien Schnelles Finden bestimmter Meldungen Einfacher Remotezugriff realisierbar Vertretung eines Admin s einfach realisierbar Zentrale Sicherung/Archivierung möglich Logdatei Logdateien Diverse Eine GUI für per manuell Admin-Tool s ALLE öffnen verwenden Logdateien

20 Die Möglichkeiten im Vergleich: Logdatei Logdateien Diverse Eine GUI für per manuell Admin-Tool s ALLE (in Minuten) öffnen verwenden Logdateien Zeitlicher Aufwand pro Tag* Anmeldungen, um alle Logdateien zu analysieren Zugriff auf alle Logdateien Feststellen des Status aller Logdateien Gesamt : 106 Min 400 Min Min 2 Min 1,8 Std. 6,7 Std. 2,4 2,7 Std. 0,03 Std In Minuten / Tag Welcher Admin opfert täglich mehr als EINE Stunde für das Lesen/Suchen in Logdateien? * Bei angenommenen 100 auszuwertenden Logdateien

21 Welche Methode(n) nutzen Sie in Ihrem Unternehmen für die Ermittlung des Status diverser Anwendungen? für die Erkennung von Fehlern oder Warnungen bei Datenbanken? für die Überwachung von Betriebssystem-Log s? für die Auswertung von Logdateien automatisierter Aktionen? Haben Sie durch Ihre Methode(n) die Möglichkeit, die drei gestellten Fragen schnell und ohne großen Aufwand zu beantworten? Zur Erinnerung: Läuft im Verantwortungsbereich alles so, wie es soll? Waren alle automatisierten Aktionen erfolgreich? Sind unsere Systeme in Ordnung?

22 eine Frage ist noch unbeantwortet Läuft im Verantwortungsbereich alles so, wie es soll? Waren alle automatisierten Aktionen erfolgreich? Sind unsere Systeme in Ordnung? Was passiert mit den Loginformationen?

23 Warum müssen Loginformationen aufbewahrt werden? Bedarf der Administratoren, Anwendungsbetreuer und Benutzer unternehmensinterne Festlegungen BSI (Bundesamt für Sicherheit in der Informationstechnik) o ISO o ISO o IT-Grundschutz Weiterführende Informationen: BSI IT-Grundschutz BSI Logdatenstudie (Verwendung von Log- und Monitoringdaten in jedem IT-Verbund)

24 Wo und wie werden Logdateien aufbewahrt? Je nach Schutzbedürfnis der Log-Informationen: kein Behandeln der Logdateien Löschen/Leeren der Logdateien ohne Sicherung Log-Rotation auf den entsprechenden Servern auf einem shared Storage zentral für alle Logdateien Backupsystem Archivsystem

25

26 Automatische Analyse in EINER grafischen Oberfläche Logfile monitor v2 Tool zur Admin-Unterstützung ALLE Loginformationen im Überblick Zentralisierung von Informationen Grafische Log-Auswertung Erleichterung der Administration Zeitersparnis durch Automation

27 ALLE Logdateien in EINER grafischen Oberfläche Nur EIN LogInfür ALLE Logdateien KEINE Logdatei bleibt unbeachtet Übergeordnete Komponente Log Aktion Oracle Datenbank mit zwei Log-Aktionen Logdatei-Status Oracle RAC Telefonanlage Siemens HiPath4000 Logdatei-Info s BackupServer Tivoli Storage Manager

28 Anzeige ungewöhnlich lang laufender Aktionen

29 Einfache Vertretung von Admin s durch Zugriffsänderung

30 Automatisierte Auswertung anhand frei definierbarer Stati

31 Zugriff auf zusätzliche Log- und Tracedateien alert_orcl.log orcl_mmnl_11590.trc

32 Sicherung eines Filesystems erfasst ALLE Logdateien Logfile monitor v2

33 Remote-Zugriff auf eine Anwendung = Zugriff auf ALLE Logdateien - Kein Zugriff auf die eigentlichen Server - Freischaltung nur EINER Anwendung für Remotezugriff - Zugriff somit auch für Personen möglich, die keine Zugriffsberechtigung auf die Server haben -ManagerView Nur gucken nicht anfassen!

34 Mögliche Einsatzgebiete Datentransfer Oracle DB Oracle RAC RMAN Export Import Cluster Backups Webserver Datenbanken Applikationen Netzwerkhardware Telefonanlagen Onlineshops Windows Linux UNIX Storages Firewalls Produktionsanlagen Infrastrukturtechnik eigene Logdateien

35 Mögliche Einsatzgebiete Datentransfer Oracle DB Oracle RAC RMAN Export Import Cluster Backups Webserver Datenbanken Applikationen Netzwerkhardware Telefonanlagen Onlineshops Windows Linux UNIX Storages Firewalls Produktionsanlagen Infrastrukturtechnik eigene Logdateien

36 Integration der Anwendung vorhandene Infrastruktur separate Admin-DMZ

37 Logfile monitor Agent zum Übertragen der Logdateien Logrotation für jede Art von textbasierten Logdateien

38 Logfile monitor Next generation Logfile monitor A dmin Suite Weiterentwicklung der Logdatei-Auswertung Erweiterung um SingleSignOn Erfassen wichtiger Webanwendungen Verwaltung aller LogIn-Daten Zugriff auf Webanwendungen ohne LogIn

39 FRAGEN?

40 Vielen Dank für Ihre Aufmerksamkeit! Wedaco Sven Mendler Am Kirschberg Beichlingen Webdevelopment Databases Consulting