Patchday: Was ein Reboot über den Server verrät
Siebzehn Pakete, vier Stunden und vier Fehler, die schon vorher da waren. Ein Patchday prüft nicht die Versionen, sondern die Annahmen.
Dieser Text gehört zur Reihe „Mein Weg“. Vorher: Der laufende Server als Ansible-Repository.
Ein Patchday klingt nach einer Aufgabe, die man abhaken kann: Pakete aktualisieren, Container neu starten, fertig. Ich hatte mir zwanzig Minuten vorgenommen. Es wurden vier Stunden, und am Ende war der Server nicht nur aktueller, sondern ehrlicher.
Denn ein Reboot ist kein Update. Er ist ein Test. Er nimmt alles, was man über den Server behauptet hat, und prüft es gegen die Wirklichkeit.
Was anstand
Siebzehn Pakete warteten, darunter das C-library-Paket, das praktisch jeder Prozess im Speicher hat, und ein neuer Kernel. Dazu Docker samt Compose, Tailscale, snapd und ein paar Kleinigkeiten. Drei Pakete blieben zurück, weil Ubuntu sie in Wellen ausrollt – das ist normal und kein Fehler.
Die Container selbst waren ein zweites Thema: sechs Images waren über Digest gepinnt, also nicht auf „latest", sondern auf einen exakten Fingerabdruck. Das ist Absicht – ein beweglicher Tag zieht beim nächsten Pull unbemerkt eine andere Version. Ein Patchday heißt dann: den Fingerabdruck bewusst erneuern, nicht den Tag ziehen lassen.
jc21/nginx-proxy-manager → 2.17.0
docker.n8n.io/n8nio/n8n → 2.47.6
searxng/searxng → 2026.11.13
ghcr.io/paperless-ngx → 3.4.2
ghcr.io/gethomepage → v2.8.0
Danach: Kernel 6.8.0-149, Docker 29.9.3, Tailscale 1.104.7. Soweit das Erwartbare.
Überraschung eins: Der Reboot hat die Ports getauscht
Nach dem Neustart antworteten alle Domains mit 502. Der Reverse Proxy war nicht da. Im Log des TLS-Proxy stand:
bind() to 0.0.0.0:8443 failed (98: Address in use)
Der Grund war eine Altlast: Auf dem Server lief noch eine Tailscale-Funnel-Konfiguration, die 443 und 8443 für sich beanspruchte. Vor dem Reboot hatte sie nie funktioniert – die Container waren zuerst da, Tailscale scheiterte im Hintergrund und gab auf. Nach dem Reboot war die Reihenfolge umgekehrt, und diesmal gewann Tailscale.
Das ist der unangenehme Teil an Bootreihenfolgen: Sie sind nicht falsch, sie sind nur manchmal anders. Ein Dienst, der monatelang „läuft", kann beim nächsten Neustart verlieren, ohne dass sich an seiner Konfiguration etwas geändert hat.
Die Funnel-Konfiguration war ohnehin wirkungslos und kollidierte auf 443 mit dem Proxy. Sie ist raus.
Überraschung zwei: Ein Container kam mit halbem Netz zurück
Der Proxy kam hoch, aber die Hälfte der Domains blieb bei 502. Der Container hing nur noch in einem von zwei Docker-Netzen. Das zweite – das Netz, in dem die Anwendungen liegen – war beim Booten verloren gegangen. docker network connect ist Laufzeitzustand, kein Besitzstand.
Die Lösung ist ein kleiner Systemd-Dienst, der nach dem Start wartet, bis der Container läuft, den fehlenden Anschluss nachzieht und nginx neu lädt. Zwanzig Zeilen Shell, idempotent, mit einem echten Test: Netz getrennt, Dienst laufen lassen, Domain wieder 200.
Der stille Ausfall: fail2ban war blind
fail2ban meldete „active" – und hatte seit Wochen null Fehlversuche gezählt. Der Grund:
Journal matches: _SYSTEMD_UNIT=sshd.service + _COMM=sshd
Auf Ubuntu heißt der Dienst ssh.service. sshd.service ist nur ein Alias, und ein Alias steht nicht im Journal. Der Filter sah also nichts, zählte nichts, sperrte nichts. Ein Sicherheitsdienst, der grün leuchtet und nichts tut, ist schlimmer als keiner – er erzeugt ein Gefühl, das nicht gedeckt ist.
Gegengeprüft mit zwei Zahlen aus demselben Zeitfenster:
journalctl _SYSTEMD_UNIT=ssh.service --since -24h | wc -l → 790
journalctl _SYSTEMD_UNIT=sshd.service --since -24h | wc -l → 1
Eine Zeile Konfiguration, und der Filter sieht wieder hin.
Die Zahlen, die niemand sieht
Beim Auswerten der Logs kam heraus, was in den drei Wochen davor passiert war. Der Server war einige Tage mit offenem SSH-Port im Netz gestanden:
| Zeitraum | Fehlversuche | Quell-IPs |
|---|---|---|
| 14.10.–13.11. | 528.274 | 1.066 |
| Spitzentag 23.10. | 66.868 | — |
| seit 03.11. | 0 | 0 |
Ein einzelner Angreifer kam auf rund 290.000 Versuche, und der beliebteste Benutzername war minecraft – 240.000 Mal. Das ist keine gezielte Attacke, das ist ein Botnetz, das die Standardliste durchprobiert.
Seit der SSH-Port nur noch über das Tailnet erreichbar ist, ist die Zahl null. Nicht weil die Angreifer aufgehört haben, sondern weil sie nicht mehr ankommen.
Dazu die Firewall: 117.234 blockierte Pakete in 30 Tagen, aus 15.296 verschiedenen Adressen, relativ gleichmäßig etwa 4.700 pro Tag. Die beliebtesten Ziele waren 8081, 22, 21114, 23, 8080 und 3389 – Ports, die auf einem Server dieser Größe alle zu sein sollten, und es auch waren.
Und im HTTP-Log: 462.753 Anfragen, davon 16.773 mit klarem Scan-Muster. Ganz oben /.env, dann /.git/config, dann wp-login.php. Alle auf 404 oder 401 gelaufen. Der Server hat nichts verraten, aber die Zahlen zeigen, wie viel Grundrauschen im Netz liegt.
Der Docker-Socket im Dashboard
Beim Durchsehen der Container fiel ein Mount auf, der schon lange da war:
- /var/run/docker.sock:/var/run/docker.sock:ro
Ein Dashboard darf damit Container-Status anzeigen – praktisch. Aber :ro ist keine Grenze. Die Docker-API ist über diesen Socket vollständig erreichbar, und wer sie erreicht, kann einen Container starten, der das Host-Dateisystem einhängt. Aus „Dashboard" wird „root auf dem Server".
Jetzt sitzt ein Socket-Proxy davor, der nur lesende Abfragen durchlässt. Der Gegentest:
GET /containers/json → 200, 51 KB
POST /containers/json → 403
Starten und Stoppen aus dem Dashboard geht damit nicht mehr. Das ist der Preis, und er ist es wert.
Die Mail-Odyssee
Der Blog konnte keine Mails verschicken. Passwort-Reset, Anmelde-Codes, Benachrichtigungen über neue Mitglieder – alles lief ins Leere, weil in der Konfiguration noch ein Platzhalter stand: smtp.example.com.
Der Relay-Anbieter war eingerichtet, die Domain authentifiziert, SPF und DKIM gesetzt. Trotzdem kam nichts an. Und hier war meine erste Diagnose falsch: Ich hielt den Account für gesperrt, weil sieben Nachrichten in Folge nur als „request" auftauchten und nie als „delivered".
requests=7 delivered=0 blocked=0 bounced=0
Der eigentliche Fehler war banaler: Als Absender war nur eine Freemail-Adresse hinterlegt, und die verstößt gegen die neuen Zustellregeln von Gmail, Yahoo und Microsoft. Nachdem ein Absender auf der eigenen Domain angelegt war, hat der Anbieter den Stau freigegeben – die alten Testmails kamen auf einen Schlag an.
Gemessen danach: gesendet 12:58:41, zugestellt 12:59:41. Sechzig Sekunden.
Zwei Lehren daraus. Erstens: „accepted" heißt nicht „zugestellt" – man muss in die Ereignisse schauen, nicht auf den Rückgabewert. Zweitens: Wenn ein Anbieter plötzlich schweigt, ist die eigene Konfiguration trotzdem der erste Verdacht, auch wenn sie plausibel aussieht.
Was am Ende anders war
- 19 Container, alle healthy, alle mit
unless-stopped. - Platte von 71 auf 43 GB – alte Image-Versionen, Build-Cache, apt-Cache.
- Logs mit Deckel: Der Proxy schrieb eine 106-MB-Datei pro Woche; jetzt täglich mit 50-MB-Grenze.
- Ghost-Backups liegen offsite – sie waren vorher nur lokal, auf derselben Platte.
- Eine Uptime-Wache alle fünf Minuten für acht Hosts, drei Ports, Container und Plattenplatz, mit Push-Alarm bei Zustandswechsel und einem externen Totmann-Ping.
- fail2ban sieht wieder hin, die Firewall ist aufgeräumt, SSH kann kein X11 mehr weiterreichen.
Vier Stunden für siebzehn Pakete. Aber die Pakete waren der kleinste Teil.
Was ich mitnehme
Ein Patchday prüft nicht die Versionen, er prüft die Annahmen. Drei der vier Probleme waren schon vorher da – der blinde fail2ban, der offene Socket, der Platzhalter in der Mail-Konfiguration. Sie sind nur nie aufgefallen, weil nichts sie ausgelöst hat. Der Reboot war dieser Auslöser.
Deshalb steht in meinem Repo jetzt nicht mehr nur, was läuft, sondern bei den kritischen Stellen auch, warum – und was passiert, wenn die Reihenfolge beim nächsten Mal anders ist.