Direkt zum Hauptinhalt

B4 DB-Cluster

Update-Strategie · Teil B · B4
Eigenheiten je System
dbCluster mit eigener StaffelDBT03 Stufe 1, DBT01/02 Stufe 2
Steckbrief
SystemeDBT01, DBT02, DBT03 (Cluster db_tenten, MariaDB-Galera), VIP DBT00
Klasse · Art · Stufedb · Cluster mit eigener Staffel · DBT03 Stufe 1, DBT01/02 Stufe 2
UpdatesKein Einspielen über den Tag. Täglich um 04:00 eine Staffel, nur wenn etwas ansteht: alle Sicherheitsupdates einschließlich MariaDB, Galera, keepalived und Kernel, dazu die Zwischenstände der Welle.
Ablauf je KnotenSnapshot-Prüfung über vCenter (Veeam: bis 60 min warten, sonst den Tag auslassen und Mail) → Cluster gesund → herausnehmen (VIP wandert) → einspielen → Neustart von Server oder Diensten → warten bis „Synced“ → zurück. Der VIP-Träger kommt zuletzt.
Gemischte FassungenZwischen den Stufen läuft der Cluster eine Woche mit gemischten MariaDB- und Galera-Fassungen. MariaDB beschreibt das nur für die Dauer eines Upgrades. Das ist bewusst hingenommen (Mark), Fehler zeigen sich auf DBT03 und halten die Welle an.
Prüfungenmariadb, keepalived, alle Knoten „Synced“ im Primary, Größe vollständig, VIP genau einmal. Stündlich dazu Replikation, Dump und Wächter.
KEVEin KEV-Fix aus einem Zwischenstand kommt ohne Welle mit der nächsten Staffel um 04:00.

Ablauf

Täglich 04:00, nach der Veeam-Sicherung ab 00:01. Die Knoten nacheinander, der VIP-Träger zuletzt. Je Knoten:

1Warten, bis die täglichen Paketlisten fertig sind (bis 20 min), Paketlisten laden.
2Bedarf ermitteln: ausstehende Sicherheitsupdates, Zwischenstände der Welle, neuer Kernel oder Dienste mit alten Bibliotheken. Ohne Bedarf ist der Knoten nach wenigen Sekunden fertig.
3Snapshot-Prüfung über vCenter: Läuft ein Snapshot (Veeam), wartet die Staffel bis 60 min, danach bricht sie ab.
4Cluster gesund: alle Knoten „Synced“ im Primary, Größe vollständig.
5Herausnehmen: Drain-Datei, keepalived gibt die VIP ab, falls sie hier liegt.
6Sicherheitsupdates und Zwischenstände einspielen.
7Neustart von mariadb und keepalived oder des Servers, je nach Bedarf.
8Warten auf „Synced“ (bis 15 min) und vollständige Größe.
9Zurück: Drain-Datei weg, keepalived wieder bereit für die VIP. Dann der nächste Knoten.

Fehlerfall

    Abbruch beim ersten Fehler, die übrigen Knoten bleiben unangetastet. Der Cluster läuft mit zwei Knoten weiter. Nach dem Herausnehmen bleibt der Knoten draußen und übernimmt die VIP nicht, bis der Fehler geklärt ist. Meldung: FEHLER „Wartungsfenster abgebrochen“ mit Schritt. Der DB-Wächter (alle 15 s) und die stündlichen DB-Prüfungen laufen unabhängig weiter. Snapshot nach 60 min noch da oder vCenter nicht erreichbar: Abbruch mit FEHLER, bevor der Knoten herausgenommen wird. Am nächsten Tag kommt die Staffel erneut.

    Eingriffe von Hand

    # Staffel für einen Knoten, zuerst als Prüflauf
    infra-run ansible-playbook playbooks/maintenance.yml -e maintenance_class=db -l athq-ls-dbt03 --check
    # DB-Wächter für Arbeiten von Hand anhalten (als root auf CTRL01)
    db-waechter pause 2h

    Herausnehmen auf dem Knoten über die Drain-Datei wie in B1, dann wandert die VIP. Wiederanlauf eines ganz gestoppten Clusters mit db-cluster-start (eine Rückfrage, DB_CLUSTER.md).

    Sonderfälle und Grenzen

      MariaDB und keepalived startet nie die stündliche Automatik neu. Alle Knoten zugleich würden das Quorum gefährden. Nach einem Neustart holt der Knoten die Änderungen über Galera nach. Fehlt zu viel, kopiert er den ganzen Stand (SST), das dauert länger. Das Limit von 15 min deckt beides ab. Jeder VIP-Wechsel trennt offene DB-Verbindungen. Die Apps verbinden sich neu. Zwischen den Stufen einer Welle laufen gemischte Fassungen (siehe Steckbrief).

      Gemessen

      DatumLaufWert 15.11.2026Probe-Staffel mit NeustartDBT02, DBT03, DBT01 je ca. 50 s, zusammen ca. 3 min, VIP einmal gewandert 18.11.2026Staffel ohne Bedarf9–10 s je Knoten, zusammen 30 s

      Stand 17.18.11.2026 · Quelle: docs/engineering/UPDATE_STRATEGIE.html im Repo TENTEN-INFRA · Commit 0698180ff71bf7 2026-11-1718 · Diese Seite wird aus dem Repo erzeugt, Änderungen bitte dort.