Büyük Veri Yönetimi: Database Sharding (Parçalama) Neden Yüksek Trafikli Sitelerin Kurtarıcısıdır?

Tek bir PostgreSQL/MySQL veritabanına sahipsiniz ve aylık 5 Milyon siparişiniz var. Veritabanının o devasa (100 GB) tabloyu okuması yavaşlamaya (Query Timeout) başlar. Klasik çözüm, sunucuya donanım RAM eklemektir (Dikey Büyüme - Vertical Scaling). Ama bir süre sonra o da biter.

Yıkılamaz Parçalanma: Database Sharding

Artık tek bir dev tablo tutmazsınız. Veriyi "Kullanıcı ID'lerine göre veya bölgelere göre" kesip (Şehirlere göre) kiraladığınız 5 farklı küçük veritabanı sunucusuna paylaştırırsınız (Yatay Büyüme - Horizontal Scaling).

Sistem İzmir'den bir müşterinin tablosunu arıyorsa, saniyede diğer 4 veritabanını pas geçer ve sadece içindeki verinin çok hafif olduğu 5. Veritabanına giderek inanılmaz bir "Okuma (Read) hızı" kazanır. Bu mühendislik eseri, Netflix gibi sistemlerin asla çökmemesinin ve yavaşlamamasının veritabanı seviyesindeki (Back-end) ana omurgasıdır.