डेटा विभाजन (शार्डिंग) डेटा अनेक सर्व्हर/डेटाबेसमध्ये विभाजित करते जेणेकरून प्रत्येक एक उपसंच ठेवतो — एकल सर्व्हरच्या पलीकडे डेटा आणि लोडचे क्षैतिज स्केलिंग सक्षम करते. विभाजन कसे करायचे (विभाजन की आणि रणनीति) हा महत्वपूर्ण निर्णय आहे.
विभाजन/शार्डिंग म्हणजे काय
PARTITIONING / SHARDING → divide data into pieces (partitions/shards) across multiple
servers, each holding a SUBSET:
→ no single server holds (or is overwhelmed by) all the data
→ scales STORAGE and LOAD horizontally (each shard handles its portion)
→ enables handling data/throughput beyond one machine's capacity
विभाजन रणनीती
HASH-based → hash the partition key → assign to a shard:
✓ EVEN distribution (avoids hotspots) ✗ range queries hard; resharding is tricky
RANGE-based → partition by value ranges (e.g. A-M, N-Z; date ranges):
✓ efficient range queries ✗ risk of HOTSPOTS (uneven load if data/access is skewed)
DIRECTORY/lookup → a lookup table maps keys to shards (flexible, but the lookup is overhead)
GEOGRAPHIC → partition by region (data locality)
