Kada griebtis skaidymo į skirsnius (partitioning), o kada šardinimo (sharding), norint mastelėti MySQL?

Question

IT Interview Practice · Accepted Answer

Abu suskaido didelę lentelę, bet skirtingais lygmenimis. **Skaidymas į skirsnius** (partitioning) padalija vieną lentelę į kelis failus **viename MySQL serveryje**. **Šardinimas** (sharding) padalija duomenis per **kelis nepriklausomus serverius**. Skaidymas padeda lentelei, kuri per didelė vienam failui; šardinimas padeda darbo krūviui, per dideliam vienai mašinai.

## Skaidymas į skirsnius (vienas serveris)

```sql
CREATE TABLE events (
  id BIGINT, created_at DATETIME, payload JSON,
  PRIMARY KEY (id, created_at)          -- partition key must be in every unique key
) PARTITION BY RANGE (YEAR(created_at)) (
  PARTITION p2024 VALUES LESS THAN (2025),
  PARTITION p2025 VALUES LESS THAN (2026),
  PARTITION p2026 VALUES LESS THAN (2027)
);
-- Queries filtering on created_at hit ONE partition (partition pruning);
-- dropping old data is an instant ALTER TABLE ... DROP PARTITION p2024.
```

Puiku laiko eilutėms ir lengvam archyvavimui, bet tai vis dar vienas serveris — ne daugiau bendro CPU, RAM ar rašymo pralaidumo.

## Šardinimas (daug serverių)

Pasirinkite **šardo raktą** (pvz. `user_id`) ir nukreipkite kiekvieną eilutę į šardą pagal maišą (hash) ar intervalą:

```
shard = hash(user_id) % N
  user 42 -> shard 2 (server B)     user 99 -> shard 0 (server A)
```

- **Privalumai** — beveik tiesinis rašymų, saugyklos ir jungčių mastelėjimas.
- **Trūkumai** — kryžminiai šardų JOIN ir tranzakcijos yra sunkūs arba neįmanomi; blogas šardo raktas sukuria karštuosius taškus; **peršardinimas** (resharding) pridedant serverius yra skausmingas. Rinkitės aukšto kardinalumo, tolygiai pasiskirsčiusį raktą ir venkite užklausų, kurios turi išsišakoti į visus šardus.

## Veiksmų tvarka

Pirmiausia išnaudokite pigesnius laimėjimus: indeksavimą, užklausų derinimą, skaitymo replikas, kešavimą, tada skaidymą į skirsnius. Griebkitės šardinimo tik tada, kai vienas pirminis serveris nebegali sugerti **rašymo** apimties — tai didžiausias šuolis operaciniame sudėtingume.

## Kodėl tai svarbu

Mastelėjimo sprendimai iš esmės yra negrįžtami ir brangūs. Žinojimas, kad skaidymas į skirsnius yra vieno serverio organizacinis įrankis, o šardinimas — paskirstytų sistemų įsipareigojimas — su savo šardo rakto ir kryžminių šardų kaštais — apsaugo komandas nuo per ankstyvo šardinimo ar tikėjimosi, kad skaidymas išspręs rašymo pralaidumo lubas, kurių jis negali.

Skaidymas į skirsnius (vienas serveris)

Šardinimas (daug serverių)

Veiksmų tvarka

Kodėl tai svarbu

Susiję klausimai