Linux Performance Analyse & Tuning

Vorkenntnisse:

Der Kurs richtet sich an Systemadministratoren und Systemplaner, die über fortgeschrittene Linux-Kenntnisse sowie I/O- und Netzwerk- und Hardware-Grundlagen verfügen. Grundkenntnisse in einer Skriptsprache sind von Vorteil.

Kursinhalt:

Die Performance von vorhandenen Linux-Systemen zu analysieren und letztlich zu steigern, sollte für alle Administratoren ein interessantes Thema sein. In dieser Schulung werden daher folgende Themen ausführlicher behandelt:

Linux-Kernel:

• Überblick über performance-relevante Funktionen
• ausgewählte performance-relevante Entwicklungen
• Überblick /proc und /sys-Dateisystem
• Kontrollgruppen (Control Groups)
• Ressourcen-Management via Systemd

Hardware-Aspekte:

• Aufbau eines modernen Computer-Systems
• Unterschiedliche Bus-Systeme
• Unterschiedliche Storage-Systeme
• Hauptspeicher>
• Soft- und Hardware RAID
• IOPS von verschiedenen Geräte-Klassen
• Besonderheiten von Flashspeicher

Prozessor:

• Der Prozess-Scheduler
• CPU-gebundene Workloads erkennen
• Metriken auf System- und Prozess-Ebene
• Load Average und Pressure Stall Information
• Scheduling-Strategien, Nice-Werte und CPU-Affinität
• Prozesse im Detail: Zustände und Tracing
• Frequenzskalierung

Hauptspeicher:

• Grundlagen zur Linux-Speicherverwaltung
• Hauptspeicher-gebundene Workloads erkennen
• Metriken auf System- und Prozess-Ebene
• Auslagerungsverhalten und Out Of Memory Killer
• Dirty Memory-Grenzwerte
• Shared Memory und Huge Pages
• Limits für 32- und 64-Bit-Linux
• Wie viel Speicher braucht ein Prozess?
• Exkurs: Speicherleck erkennen
• Exkurs: Speicherverbrauch begrenzen
• Exkurs: Hauptspeicher komprimieren

Massenspeicher und Dateisysteme:

• Wie Prozesse I/O generieren
• Der Linux I/O Stack
• I/O-gebundene Workloads erkennen
• Metriken auf System-, Dateisystem- und Prozess-Ebene
• Bandbreite versus IOPS
• Empfohlene Dateisystem-Größen
• I/O-Scheduling und Multiqueue I/O (blk-mq)
• Besonderheiten von SAN-Systemen und Flashspeicher
• Performance und Datenintegrität
• Tuning-Tipps für Ext4, XFS und BTRFS
• Dateisystem-Fragmentierung
• Dateisysteme ausrichten
• Funktionsweise und Handhabung von SSDs

Netzwerk:

• Sende- und Empfangspuffer
• Congestion Control
• Metriken auf System-, Prozess- und Verbindungs-Ebene
• Analyse von TCP-Verbindungen
• Netfilter/Conntrack-Parameter
• Bufferbloat
• Statistiken und Netflows

Methoden der Performance-Analyse:

• Einige Antimethoden
• Systematische Methoden
• Die USE-Methode
• Thread-Zustände

Graphing und Monitoring:

• Grundbegriffe
• Realtime-Monitoring mit Top-Alternativen, Sysstat und Netdata
• RRD-Grundlagen
• Collectd
• Net Flows
• Überblick über weitere Ansätze

Benchmarks:

• Richtiges Messen und typische Meßfehler
• Unterschiedliche Benchmark-Typen
• Test-Szenarios mit gängigen Benchmarks
• Belastungsgrenzen herausfinden
• Ergebnisse bewerten
• Exkurs: Flexible I/O Tester

Anwendungen:

• NFS und FS-Cache
• Apache
• MariaDB und PostgreSQL
• Rsync
• Ausblick: Loadbalancing via IPVS

Ziel:

Nach diesem Kurs sind Sie in der Lage, selbständig Performance-Probleme zu analysieren. Sie können Metriken auf System-Ebene auswerten, um Performance-Engpässe zu finden, um dann heraus zu finden, welche Prozesse, Netzwerk-Verbindungen oder sonstige Quellen von Arbeit für den Computer einen Engpass verursachen. Strukturiertes, methodisches Vorgehen stellt dabei sicher, dass Sie an alles gedacht haben. Die im Kurs erworbenen Kenntnisse erleichtern zudem die optimale Dimensionierung neuer Server sowie den performance-orientierten Aufbau von Anwendungs- und Dienste-Infrastrukturen. Mit ausgewählten Tuning-Optionen beschleunigen Sie den ein oder anderen Workload.