Memnuniyet açısından iyi ya da kötü bir fikirde milyon anahtar-değer depolama?

Question

5 milyon anahtar/değer çiftini saklamak için PHP uygulamam ile birlikte memcached kullanmayı düşünüyorum. Amacım, DB'den (benim durumumda dosya sistemi olan) ileri geri çekilmekten kaçınmaktır. Anahtar/değer çiftlerine saniyede 100-500 erişime sahip olabilirim. Anahtar değerleridir hem MD5 en ve formda şunlardır:

array('MD5X' => 'MD5Y', ...) 

Ben verilerin depolandığı nasıl emin değilim, ama biz 5 million * 16 bytes (keys) + 5 million * 16 bytes (values) çarpın eğer ~ 180MB olsun.

:

veri kümesi sabittir

yüzden sadece ondan okuyacaktır (DÜZENLEME tüm öğeleri saklamak için 750MB kadar kullanabilirsiniz gerçek memcached örneği ile denedikten sonra.).

Sorular:

1. bu iyi ya da kötü tasarım mı?
2. Memcached'ı hiçbir zaman (sunucu çökmedikçe) verileri yeniden yüklemek zorunda kalabilir mi? Bellek kapağının saklanan verilerden daha yüksek olduğunu varsayarsak? Değilse, aynı hedefe ulaşmak için hangi teknikleri kullanabilirim?

Çok teşekkürler!

Answer 1

İhtiyacınız olan performansı alacak mısınız? Kesinlikle. Memcache hızlı yanıyor. Yaklaşık 10 milyon anahtar saklıyoruz ve memcache'ye yaklaşık 700 kez bir saniyede erişiyoruz. Bizi asla hayal kırıklığına uğratmadı.

Uygulamayı başlattığınızda memcache'deki tüm anahtarları yükleyebilir ve son kullanma tarihini çok uzun bir süre olarak ayarlayabilirsiniz. Hatırlaman gereken şey, memcache’in nihayetinde bir önbellek olmasıdır. Ve bir depolama motoru olarak kullanılmamalıdır. Gereksinim duyduğunuz verileri (anahtarı) bulmamanın ve bu durumda bir DB çağrısı yapmanın her zaman bir olasılık olduğunu düşünmek zorundasınız.

Cassandra gibi bir noSQL veritabanına bakabileceğiniz alternatif, ihtiyaçlarınızı karşılayan mükemmel okuma ve yazma hızlarına sahiptir. Tek şey memcache ile karşılaştırıldığında cassandra ince ayar yapmak biraz zor.