B1 Webserver
| Steckbrief | |
|---|---|
| Systeme | WEB01, WEB02 (Cluster web_tenten, web_plamis), beide liefern alle Sites aus |
| Klasse · Art · Stufe | extern · Cluster mit Staffel · WEB02 Stufe 1, WEB01 Stufe 2 |
| Verteilung | Der HAProxy prüft /healthz alle 2 s. Er nimmt einen Knoten nach 3 Fehlschlägen heraus (≤ 6 s) und nach 2 Erfolgen wieder auf. |
| Herausnehmen | Drain-Datei → /healthz liefert 503. Danach 15 s warten und warten, bis 10 s lang keine Anfrage mehr kommt (höchstens ca. 70 s). |
| Dienste | nginx: Programmaustausch statt Neustart (bei Fehler Neustart ca. 1 s). php-fpm und die übrigen Dienste starten sofort neu. |
| Prüfungen | nginx, php8.4-fpm, Versanddienst je Site, /healthz, Startseite je ausgerollter Site. In A das Testskript je Site. In A und B: keine 5xx, keine Fehler im nginx-Protokoll. |
Ablauf
Laufend: Sicherheitsupdates stündlich. Betrifft ein Update eine Bibliothek, tauscht nginx sein Programm aus, ohne Verbindungen zu verlieren. php-fpm startet sofort neu.
Kernel-Staffel (bei neuem Kernel, ausgelöst von der stündlichen Prüfung) und Neustart im Fenster 04:30 laufen gleich. Reihenfolge WEB01, dann WEB02:
| Vorlauf (nur Staffel): Sicherheitsupdates auf allen Knoten mit Staffel | |
| 2 | Vorprüfung: Der andere Knoten antwortet auf /healthz mit 200, sonst wird nichts angefasst. |
| 3 | Herausnehmen: Drain-Datei anlegen, /healthz liefert 503, 15 s warten, dann warten, bis 10 s keine Anfrage mehr ankommt. |
| 4 | Neustart mit Zeitlimit 10 min. |
| 5 | A, draußen: Prüfung wie im Fenster, Testskript je ausgerollter Site (site-test-<site>.py), dann 2 min lang jede Minute stabil. |
| 6 | Zurück: Drain-Datei weg, /healthz 200. Der HAProxy nimmt den Knoten nach 2 Erfolgen auf und fährt ihn 10 s lang hoch (slowstart). |
| 7 | B, mit Verkehr: 5 min lang jede Minute die Prüfung, keine 5xx und keine Fehler im nginx-Protokoll seit dem Neustart. Erst danach kommt WEB02. |
Fehlerfall
Eingriffe von Hand
Auf CTRL01 unter /srv/ansible, als Ansible-Konto:
# Staffel für einen Knoten wiederholen (erledigt einen Abbruch, gibt den Knoten zurück) infra-run ansible-playbook playbooks/kernel-rolling.yml -l athq-ls-web01 # Fenster für einen Knoten, zuerst als Prüflauf infra-run ansible-playbook playbooks/maintenance.yml -e maintenance_class=extern -l athq-ls-web01 --check # Ergebnis der letzten Staffel bzw. des letzten Fensters cat /var/lib/tenten-infra/rolling/athq-ls-web01.json /var/lib/tenten-infra/fenster/athq-ls-web01.json
Auf dem Knoten selbst herausnehmen bzw. zurückgeben:
sudo touch /var/lib/tenten-infra/drain # heraus (/healthz 503) sudo rm /var/lib/tenten-infra/drain # zurück
Staffel abschalten: ha_active.web_tenten und ha_active.web_plamis in group_vars/all.yml auf false. Dann kommt der Kernel erst im Fenster 04:30.
Sonderfälle und Grenzen
infra-run).
Fällt ein Knoten aus, ohne dass er herausgenommen wurde, merkt der HAProxy das nach höchstens 6 s. Anfragen in diesen Sekunden können scheitern.
Gemessen
Stand 17.18.11.2026 · Quelle: docs/engineering/UPDATE_STRATEGIE.html im Repo TENTEN-INFRA · Commit 0698180ff71bf7 2026-11-1718 · Diese Seite wird aus dem Repo erzeugt, Änderungen bitte dort.