Wie archiviert man alte Daten und bereinigt Partitionen sicher?

Question

IT Interview Practice · Accepted Answer

Klären Sie zuerst, **welche Daten das aktive System verlassen dürfen und wie sie später abgerufen werden**. Daraus ergibt sich, was sich sicher löschen lässt.

Archivierung bewahrt eine nutzbare historische Kopie. Bereinigung entfernt die aktive Kopie. Das sind getrennte Entscheidungen: Ein erfolgreicher Export beweist noch keine sichere Löschung.

## 1. Legen Sie die geeigneten Daten fest

Angenommen, ein Bestellsystem hält abgeschlossene Bestellungen der letzten zwölf Monate online. Das ist eine Beispielregel. Eine ältere Bestellung mit ungeklärtem Streitfall muss möglicherweise aktiv bleiben.

Vereinbaren Sie Stichtag, Zeitzone, Ausnahmen und historische Abfragen. Wenn eine alte Rechnung benötigt wird, muss das Archiv die dafür nötigen Kennungen und Beziehungen erhalten.

**Partitionierung** zerlegt eine logische Tabelle in physische Teile, beispielsweise einen pro Monat. Eine Monatspartition darf nur vollständig entfernt werden, wenn jeder Datensatz geeignet ist. Andernfalls müssen Ausnahmen sicher verschoben oder gezieltere Löschverfahren gewählt werden.

## 2. Verhindern Sie fehlende Änderungen im Archiv

Eine Bestellung wird kopiert, danach wird ihr Betrag vor dem Löschen des Originals korrigiert. Die exportierte Kopie enthält nun den falschen Betrag.

Entscheiden Sie, wie diese Lücke geschlossen wird:

- Stoppen Sie Schreibzugriffe im ausgewählten Bereich vor einem konsistenten Snapshot.
- Oder erfassen Sie Änderungen während des Kopierens und übernehmen sie vor dem Löschen bis zu einem vereinbarten endgültigen Zeitpunkt.

Bestimmen Sie den Umgang mit verspäteten Datensätzen und späteren Korrekturen. Alte Zeitstempel auszuwählen verhindert nicht, dass ein anderer Prozess diese Zeilen verändert.

## 3. Beweisen Sie die Nutzbarkeit der Kopie

```text
[Eligible range] -> [Consistent export] -> [Archive + manifest]
                                                |
                                      [Restore and verify]
```

Ein Manifest beschreibt Umfang, Schemaversion, Anzahlen und Dateiprüfsummen des Exports. Es identifiziert das Archiv und hilft, unvollständige oder beschädigte Dateien zu erkennen.

Prüfen Sie mehr als die Existenz einer Datei:

- Vergleichen Sie Datensatzanzahlen und aussagekräftige Summen, beispielsweise Beträge je Währung.
- Prüfen Sie Integrität, Kennungen und Beziehungen.
- Stellen Sie repräsentative Daten isoliert wieder her und rufen Sie benötigte historische Bestellungen oder Rechnungen ab.

Dokumentieren Sie den geprüften Quellstichtag und die prüfende Person. Schützen Sie den Archivzugriff und bestimmen Sie seine Aufbewahrungsdauer. Das Original darf erst nach nachgewiesener Wiederherstellung entfernt werden.

## 4. Wählen Sie das Löschverfahren

| Situation | Vorgehen | Zu prüfen |
| --- | --- | --- |
| Eine ganze Partition ist geeignet | Geplant abtrennen oder löschen | Archivprüfung, Sperren und abhängige Objekte. |
| Geeignete Zeilen sind mit aktiven vermischt | Kleine, fortsetzbare Löschbatches | Stabile Auswahl, Transaktionsgröße und Replikationsverzug. |

Beim Abtrennen einer PostgreSQL-Partition bleibt eine eigenständige Tabelle, die vor dem Löschen archiviert und geprüft werden kann. Das ist nützlich, wenn historische Abfragen während der Prüfung auf diese Tabelle zugreifen.

Das Entfernen einer Partition vermeidet einzelne Zeilenlöschungen, benötigt aber weiterhin Sperren. Nebenläufiges Abtrennen hat Einschränkungen; prüfen Sie Version und Abhängigkeiten. Bei Batchlöschungen beobachten Sie auch Transaktionslogs und Bereinigungsarbeit. [Partitionspflege in PostgreSQL](https://www.postgresql.org/docs/current/ddl-partitioning.html).

## 5. Machen Sie Wiederholungen sicher

Speichern Sie die Phasen exportiert, geprüft, löschbereit und bereinigt dauerhaft. Nach einem Neustart muss der Job den exakt geprüften Bereich kennen, statt einen größeren Stichtagsbereich neu zu berechnen.

Prüfen Sie vor dem Löschen erneut auf nicht archivierte Änderungen. Kontrollieren Sie danach aktive Abfragen und den Abruf archivierter Datensätze.

**Merksatz:** Eignung festlegen → Änderungen kontrollieren → Wiederherstellung beweisen → Löschmethode wählen → Ergebnis prüfen. Das Ziel sind weniger aktive Daten bei zuverlässigem historischen Zugriff.

Situation	Vorgehen	Zu prüfen
Eine ganze Partition ist geeignet	Geplant abtrennen oder löschen	Archivprüfung, Sperren und abhängige Objekte.
Geeignete Zeilen sind mit aktiven vermischt	Kleine, fortsetzbare Löschbatches	Stabile Auswahl, Transaktionsgröße und Replikationsverzug.

1. Legen Sie die geeigneten Daten fest

2. Verhindern Sie fehlende Änderungen im Archiv

3. Beweisen Sie die Nutzbarkeit der Kopie

4. Wählen Sie das Löschverfahren

5. Machen Sie Wiederholungen sicher

Ähnliche Fragen