Bagaimana mengarsipkan data lama dan menghapus partisi dengan aman?

Question

IT Interview Practice · Accepted Answer

Mulailah dengan menentukan **data mana yang boleh keluar dari sistem aktif dan bagaimana data itu akan diambil kembali**. Inilah dasar untuk menentukan apa yang aman dihapus.

Pengarsipan menyimpan salinan historis yang dapat digunakan. Purging menghapus salinan aktif. Keduanya keputusan terpisah: ekspor yang berhasil tidak membuktikan penghapusan aman.

## 1. Tentukan data yang memenuhi syarat

Misalkan sistem pesanan menyimpan pesanan selesai dari dua belas bulan terakhir secara online. Ini kebijakan ilustratif. Pesanan lebih lama yang masih disengketakan mungkin harus tetap aktif.

Sepakati batas waktu, zona waktu, pengecualian, dan kebutuhan pencarian historis. Jika bisnis perlu mengambil faktur lama, arsip harus mempertahankan identitas dan hubungan data yang diperlukan.

**Partisi** membagi satu tabel logis menjadi bagian fisik, misalnya satu bagian per bulan. Menghapus partisi bulanan masuk akal hanya jika setiap record di dalamnya memenuhi syarat. Jika tidak, pindahkan pengecualian dengan aman atau pilih penghapusan lebih selektif.

## 2. Pastikan perubahan tidak terlewat dari arsip

Bayangkan pesanan disalin, lalu nilainya dikoreksi sebelum data asli dihapus. Salinan ekspor kini memuat nilai yang salah.

Pilih cara menutup celah ini:

- Hentikan penulisan pada rentang terpilih sebelum mengambil snapshot konsisten.
- Atau tangkap perubahan selama penyalinan dan terapkan sampai batas akhir yang disepakati sebelum penghapusan.

Tentukan tujuan record terlambat dan koreksi berikutnya. Memilih timestamp lama saja tidak mencegah proses lain mengubah baris tersebut.

## 3. Buktikan salinan tersimpan dapat digunakan

```text
[Eligible range] -> [Consistent export] -> [Archive + manifest]
                                                |
                                      [Restore and verify]
```

Manifest menjelaskan isi ekspor: rentang, versi skema, jumlah record, dan checksum file. Ini membantu mengenali arsip serta mendeteksi file tidak lengkap atau rusak.

Jangan hanya memeriksa keberadaan file:

- Bandingkan jumlah record dan total bermakna, seperti nilai berdasarkan mata uang.
- Periksa integritas, identitas, dan hubungan data.
- Pulihkan data representatif di lingkungan terisolasi dan ambil pesanan atau faktur historis yang dibutuhkan pengguna.

Catat batas sumber yang telah diverifikasi dan siapa pemeriksanya. Lindungi akses arsip dan tentukan retensinya. Data asli baru boleh dihapus setelah jalur pemulihan yang diperlukan terbukti.

## 4. Pilih cara menghapus salinan aktif

| Situasi | Pendekatan | Yang perlu diperiksa |
| --- | --- | --- |
| Seluruh partisi memenuhi syarat | Lepaskan atau hapus melalui pemeliharaan terencana | Verifikasi arsip, lock, dan objek bergantung. |
| Baris yang memenuhi syarat bercampur dengan data aktif | Hapus dalam batch kecil yang bisa dilanjutkan | Pemilihan stabil, ukuran transaksi, dan lag replika. |

Di PostgreSQL, pelepasan partisi menyisakan tabel mandiri yang bisa diarsipkan dan diperiksa sebelum dihapus. Urutan ini berguna jika akses historis diarahkan ke tabel tersebut selama verifikasi.

Penghapusan partisi menghindari penghapusan baris satu per satu, tetapi tetap membutuhkan lock. Concurrent detach memiliki batasan, jadi periksa versi terpasang dan dependensinya. Untuk penghapusan batch, pantau juga log transaksi dan pekerjaan pembersihan. [Pemeliharaan partisi PostgreSQL](https://www.postgresql.org/docs/current/ddl-partitioning.html).

## 5. Buat percobaan ulang aman

Simpan kemajuan sebagai diekspor, diverifikasi, siap dihapus, dan sudah dihapus. Setelah restart, job harus mengetahui rentang persis yang diverifikasi, bukan menghitung batas baru yang lebih luas.

Sebelum menghapus, periksa kembali bahwa tidak ada perubahan belum diarsipkan dalam rentang itu. Setelahnya, pastikan query aktif tetap bekerja dan record arsip masih dapat diambil.

**Ingat:** tentukan kelayakan → kendalikan perubahan → buktikan pemulihan → pilih penghapusan → verifikasi hasil. Tujuannya mengurangi data aktif dengan akses historis yang andal.

Situasi	Pendekatan	Yang perlu diperiksa
Seluruh partisi memenuhi syarat	Lepaskan atau hapus melalui pemeliharaan terencana	Verifikasi arsip, lock, dan objek bergantung.
Baris yang memenuhi syarat bercampur dengan data aktif	Hapus dalam batch kecil yang bisa dilanjutkan	Pemilihan stabil, ukuran transaksi, dan lag replika.

1. Tentukan data yang memenuhi syarat

2. Pastikan perubahan tidak terlewat dari arsip

3. Buktikan salinan tersimpan dapat digunakan

4. Pilih cara menghapus salinan aktif

5. Buat percobaan ulang aman

Pertanyaan terkait