Ein Backup-Ziel, das einen Nachmittag gebraucht hat

Ein Backup-Ziel, das einen Nachmittag gebraucht hat

Ein Backup-Ziel einzurichten hat an diesem Tag länger gedauert als der Server, den es sichern soll. Bestellt war es in zwei Minuten: eine Hetzner Storage Box, 1 TB, 3,81 Euro im Monat. Der Rest des Nachmittags ging für die Frage drauf, warum ein Dienst „Permission denied" sagt, wenn das Passwort stimmt.

Die Idee war einfach. Meine Backups liegen verschlüsselt auf einem zweiten Server im Tailnet. Das ist besser als nichts, aber es ist derselbe Anbieter, dieselbe Region, dasselbe Konto. Wenn da etwas schiefgeht, geht alles gleichzeitig schief. Also ein zweites Ziel bei einem anderen Produkt – Storage Box statt Cloud-Server – und die Restic-Snapshots gehen abwechselnd an beide.

Fehler eins: das Passwort

Storage Box bestellt, Passwort gesetzt, ssh-copy-id gegen den SFTP-Dienst. Antwort:

u702602@u702602.your-storagebox.de: Permission denied (publickey,password).

Also Passwort geändert, nochmal. Wieder abgelehnt. Dann die naheliegende Erklärung: Ich hatte das Passwort beim Anlegen einmal gesehen und nicht gespeichert. Ein neues gesetzt, wieder abgelehnt.

An diesem Punkt hätte ich stutzig werden müssen. Ein Dienst, der ein frisch gesetztes Passwort ablehnt, hat entweder ein anderes Problem – oder ich rede mit dem falschen Dienst. Ich habe weiter am Passwort gearbeitet, weil das die sichtbare Fehlermeldung war.

Fehler zwei: zwei SSH-Dienste auf einem Host

Die Storage Box hat zwei Zugänge, die beide SSH sprechen und sich völlig unterschiedlich verhalten:

Port 22: SSH-2.0-mod_sftp          (ProFTPD, nur SFTP-Subsystem)
Port 23: SSH-2.0-OpenSSH_9.6p1     (echter SSH-Dienst)

Und sie starten in unterschiedlichen Verzeichnissen. Auf Port 22 ist die Wurzel /, auf Port 23 ist sie /home. Dasselbe Repository liegt damit je nach Port an einer anderen Stelle:

sftp> pwd
Remote working directory: /home

Mein Restic-Repository lag nach dem ersten Versuch unter /restic-offsite2 – erreichbar über den einen Port, unsichtbar über den anderen. Zwei Stunden später habe ich den Pfad auf /home/restic-offsite2 geändert und mich gewundert, warum „das Repository ist weg" ist. Es war nie weg. Ich habe an der falschen Tür geklopft.

Fehler drei: der Schalter, der nichts mit SSH zu tun hat

Der eigentliche Blocker war eine Checkbox in der Weboberfläche: „Äußere Erreichbarkeit". Ohne sie nimmt die Box Verbindungen an, authentifiziert den Schlüssel – und wirft die Sitzung unmittelbar danach weg:

Authenticated to u720642.your-storagebox.de ... using "publickey".
Connection to u720642.your-storagebox.de closed by remote host.

Das sieht aus wie ein Schlüsselproblem. Es ist eine Zugriffsbeschränkung. Und weil die Fehlermeldung an der Stelle nicht „Zugriff verweigert durch Richtlinie" heißt, sondern die Verbindung einfach endet, habe ich zuerst am Schlüssel gesucht.

Nach dem Setzen des Hakens funktionierten beide Ports sofort.

Fehler vier: der Schlüssel im falschen Format

Was danach kam, war die unangenehmste Stunde. Ich hatte in der Zwischenzeit meinen persönlichen SSH-Key auf den Server kopiert, weil er auf der Box bereits autorisiert war. Das war der falsche Weg – ein Schlüssel für alles ist genau das, was man nicht will –, aber er hat den ersten Test ermöglicht.

Der Key funktionierte, dann nicht mehr, dann wieder. Der Grund stand in der Datei:

ssh-ed25519 AAAAC3NzaC1lZDI1NTE5AAAAIDav...
---- BEGIN SSH2 PUBLIC KEY ----
Comment: "mint-tobi"
AAAAC3NzaC1lZDI1NTE5AAAAIDav...
---- END SSH2 PUBLIC KEY ----

In der authorized_keys steckte derselbe Schlüssel zweimal: einmal im OpenSSH-Format, einmal im alten SSH2-Format (RFC 4716). Der SFTP-Dienst bricht beim Parsen an diesem Block ab und ignoriert alles, was danach kommt. Ein Schlüssel, der in der Datei steht, ist damit nicht automatisch ein Schlüssel, der gelesen wird.

Dazu kam eine Sperre: Nach vielen schnellen Verbindungsversuchen lehnte die Box für einige Minuten jeden Schlüssel ab – auch den richtigen. Das sah nach „beide Schlüssel kaputt" aus und war nur eine Pause.

Die Sperre, die wie ein kaputter Schlüssel aussah

Zwischendurch war für ein paar Minuten gar nichts mehr möglich. Beide Schlüssel wurden abgelehnt, auch der, der eben noch funktioniert hatte:

u720642@u720642.your-storagebox.de: Permission denied (publickey,password).

Meine erste Diagnose war „jetzt ist die Datei ganz kaputt". Die zweite war „ich habe den Key überschrieben". Beides falsch. Die Box begrenzt die Zahl der Verbindungsversuche und sperrt die Quell-IP für eine Weile, wenn es zu viele werden – und ich hatte in zehn Minuten dreißig davon gemacht, weil ich jeden Zwischenstand sofort testen wollte.

Das Fatale daran: Eine Sperre sieht genauso aus wie ein falscher Schlüssel. Ich habe in dieser Zeit weiter an der authorized_keys gearbeitet, also an einer Datei, die gar nicht das Problem war. Nach einer Wartezeit von ein paar Minuten funktionierte derselbe Stand sofort.

Seitdem gilt für mich: Wenn ein Zugang plötzlich „von jetzt auf gleich" nicht mehr geht und vorher ging, ist die erste Vermutung nicht die Konfiguration, sondern die Bremse.

Was jetzt läuft

Irgendwann war die Kette dann klar, und der Rest war unspektakulär:

Host storagebox
    HostName u720642.your-storagebox.de
    User u720642
    Port 23
    IdentityFile /root/.ssh/id_ed25519_storagebox
    IdentitiesOnly yes

Ein eigener Key, nur für diesen Zweck, ohne Passphrase, 600, root. Das Repository ist initialisiert, der erste Lauf hat 3,7 GB hochgeladen, die Aufbewahrung steht auf 7 täglich, 4 wöchentlich, 6 monatlich.

Gesichert werden nicht nur die Datenbank-Dumps, sondern alles, was einen Neuaufbau tragen würde: die Compose-Dateien, die Cron-Einträge, die .env-Dateien, die erzeugten Zugangsdaten des Monitoring-Hosts und die Backups selbst. Der Restic-Lauf prüft zum Schluss mit restic check, ob die Struktur des Repositories intakt ist – ein Backup, das sich nicht zurückspielen lässt, ist keins.

Dazu zwei Dinge, die mir wichtiger sind als das Backup selbst:

Die Frische ist eine Metrik. Ein Cron-Job schreibt alle 30 Minuten den Zeitpunkt des letzten Snapshots in eine Textdatei, die der node-exporter einsammelt. In Prometheus steht damit restic_snapshot_timestamp_seconds{repo="storagebox"} – und eine Regel, die anschlägt, wenn der Wert älter als 36 Stunden wird. Vorher war „das Backup läuft" eine Annahme; jetzt ist es eine Zahl mit Verlauf.

Die Einrichtung ist im Repository. Rolle, Compose-Datei und Cron liegen im Ansible-Repo, nicht in meinem Kopf. Beim nächsten Server kostet das gleiche Ziel zehn Minuten statt eines Nachmittags.

Was ich mitnehme

Die Fehlermeldung beschreibt das Symptom, nicht die Ursache. „Permission denied" hieß in diesem Fall: falscher Port, falscher Pfad, fehlender Haken und eine Datei mit einem kaputten Eintrag. Vier Ursachen, eine Meldung.

Erst die Schicht prüfen, dann den Inhalt. Ich habe lange am Passwort gearbeitet, obwohl die Verbindung schon auf der falschen Ebene scheiterte. Ein Blick auf ssh -vv – „Authentications that can continue: *(leer)*" – hätte mir früher gezeigt, dass die Box gar keine Methode anbietet.

Ein Schlüssel pro Zweck. Der persönliche Key war bequem und hat die Fehlersuche verlängert, weil er auf der Box lag und ich ihn nicht anfassen wollte. Der eigene Key hat fünf Minuten gekostet und danach nie wieder.

Und die nüchterne Bilanz: Das Backup-Ziel, das einen Nachmittag gebraucht hat, ist jetzt der langweiligste Teil der Infrastruktur. Das ist der Punkt, an dem ich aufhören kann, darüber nachzudenken.