Bir JSON dizesini Cassandra sütununda depolamanın etkili yolu?

Question

Cassandra yeni soru. REST çağrılarını kullanarak bir sosyal ağ sitesinden bazı veriler topluyorum. Bu yüzden JSON formatında geri gelen veriler ile sonuçlanır. JSON, tablomdaki sütunlardan yalnızca biridir. JSON dizesini saklamak için "en iyi uygulama" nın ne olduğunu bulmaya çalışıyorum. Öncelikle haritasının türünü kullanmayı düşündüm, ancak JSON dizeleri, sayısal türleri, vb. Bir karışımını içerir. Harita anahtar/değer için joker türlerini bildirebilirim gibi görünmüyor. JSON dizgisi büyük olasılıkla, büyük ihtimalle 10 KB'nin üzerinde olabilir. Potansiyel olarak bir ip gibi saklayabilirim, ama bu verimsiz gibi gözüküyor. Bunun ortak bir görev olduğunu varsayardım, bu yüzden bunun nasıl yapılacağına dair genel bazı kurallar vardır. Cassandra'nın JSON için yerel desteği olduğunu biliyorum, ancak anladığım kadarıyla, çoğunlukla JSON haritasının tamamı veritabanı şemasıyla 1-1 eşleştiğinde kullanılır. Benim için böyle değil. Şemada bir grup sütun var ve JSON dizgisi bir çeşit "yük". JSON dizesini blob veya "text" olarak depolamak daha mı iyi? BTW, Cassandra versiyonu 2.1.5. Herhangi bir ipucu takdir edildi. Şimdiden teşekkürler.

Answer 1

sakıncaları vardır metni esas olarak blobları depolar. Ve evet, bahsettiğiniz "yerel" JSON desteği sadece veri modelinizin JSON modelinize uyduğunda ve yalnızca Cassandra 2.2+ sürümünde olduğu içindir.

Bunu bir metin türü olarak depolarım ve verileri gönderirken JSON verilerinizi sıkıştırmak için herhangi bir şey uygulamak zorunda kalmamanız gerekir (ya da sıkıştırmayı açmadan). Cassandra'nın İkili Protokolü, transport compression'u desteklediğinden beri. Ayrıca, tablonuzun her bir okuma isteği için sıkıştırma yapmaya karşı kaydetmek için data compressed'u aynı sıkıştırma algoritmasıyla (LZ4'ü en hızlı algo oluşturduğundan öneririm) sakladığından emin olun. Böylece, sıkıştırılmış verileri depolamak ve aktarım sıkıştırmasını kullanmak üzere yapılandırırsanız, kendiniz bile uygulamak zorunda kalmazsınız.

Kullandığınız İstemci Sürücüsü'nü söylemediniz, ancak burada Datastax Java Client Driver için Aktarım Sıkıştırma ayarlarının nasıl yapılacağıyla ilgili belgeler.