Redis: Anahtarlar için veritabanı boyutunu / boyutunu göster

Redis örneğim çok büyüyor gibi görünüyor ve sahip olduğum çoklu veritabanlarından hangisinin ne kadar hafıza tükettiğini öğrenmek istiyorum. Redis'in INFOkomutu bana sadece veritabanı başına toplam boyutu ve anahtar sayısını gösteriyor ki bu bana çok fazla fikir vermiyor ... Yani redis sunucusunu izlerken bana daha fazla bilgi veren herhangi bir araç / fikir takdir edilecektir.

Redis dokümantasyonu bana belirli tuşların tüketilen belleğini döndürebilecek herhangi bir komut göstermiyor, bu yüzden eğer herhangi bir hatalı kod yeniden yapmak için çok fazla "çöp" yazarsa, bunu bulması gerçekten zor olabilir ...

Bu yüzden kendi sorunuma çözümüm: redis-cliBiraz daha oynadıktan sonra , anahtar DEBUG OBJECT <key>gibi bir şeyi açığa çıkardığını öğrendim serializedlength, ki bu aslında aradığım bir şeydi ...

Bütün bir veritabanı için KEYS *, seçtiğiniz bir betik dili ile çok zor olmaması gereken tüm değerleri toplamanız gerekir ...

Kötü olan şey, redis.io'nun hakkında pek fazla bilgiye sahip olmamasıdır DEBUG OBJECT.

Yorumlardan elde edilen çözüm, kendi cevabını hak ediyor:

redis-cli --bigkeys

MEMORY USAGE key command size bir anahtarın ve değerinin RAM'de depolanması gereken bayt sayısını verir.

Bildirilen kullanım, bir anahtarın değerinin gerektirdiği veri ve yönetimsel ek yükler için toplam bellek ayırmalarıdır (kaynak yeniden belgeleme)

Bu projeye bir göz atın, normal ifadelere ve öneklere dayalı olarak anahtar uzayları hakkında bazı ilginç istatistikler çıkarır. DEBUG OBJECTKomutu kullanır ve db'yi tarar, anahtar gruplarını tanımlar ve kapladıkları alan yüzdesini tahmin eder.

https://github.com/snmaynard/redis-audit

Çıktı şuna benzer:

Summary  

---------------------------------------------------+--------------+-------------------+---------------------------------------------------  
Key                                                | Memory Usage | Expiry Proportion | Last Access Time                                    
---------------------------------------------------+--------------+-------------------+---------------------------------------------------  
notification_3109439                               | 88.14%       | 0.0%              | 2 minutes                               
user_profile_3897016                               | 11.86%       | 99.98%            | 20 seconds  
---------------------------------------------------+--------------+-------------------+---------------------------------------------------  

Veya şu: https://github.com/sripathikrishnan/redis-rdb-tools bir dump.rdb dosyasını çevrimdışı olarak analiz ederek tüm anahtar alanı üzerinde tam bir analiz yapar. Bu da iyi çalışıyor. Size db'nizdeki girişler için ortalama / min / maksimum boyutu verebilir ve hatta bunu bir öneke göre yapar.

Redis anahtarlarını örneklemeyi ve bunları türe göre gruplamayı çok yararlı bulabilirsiniz. Salvatore, yaklaşık 10.000 komut ve ardından alınan anahtarlar üzerinde çalışan redis-örnekleyici adlı bir araç yazdı . Birkaç saniye veya dakika içinde, anahtar türlerinin dağılımının oldukça doğru bir görünümünü elde etmelisiniz.RANDOMKEYTYPE

Size ne tür uygulama anahtarları hakkında bir fikir veren (hangi adlandırma yapısına göre olursanız olun kullanarak), Redis'te saklanır. Yeniden-örnekleyicinin daha genel çıktısıyla birleştiğinde, bu size neler olup bittiğine dair son derece iyi bir fikir verecektir.

Belki db dosyasında biraz iç gözlem yapabilirsiniz. Protokol nispeten basittir (ancak iyi belgelenmemiştir), bu nedenle hangi anahtarların çok fazla yer kapladığını belirlemek için bir ayrıştırıcı yazabilirsiniz.

Yeni öneriler:

Yazılanları MONITORcanlı görmek için kullanmayı denediniz mi? Belki de sorunu hareket halindeki verilerle bulabilirsiniz.

Redis anahtarının boyutunu hesaplamak için .net uygulamasını https://github.com/abhiyx/RedisSizeCalculator kullanabilirsiniz ,

Lütfen aynı şekilde geri bildirimde bulunmaktan çekinmeyin

Bu tür senaryoları gidermek için genellikle anahtar örnekleme yöntemini tercih ederim.

redis-cli -p 6379 -n db_number --bigkeys

Örneğin:-

redis-cli -p 6370 -n 0 --bigkeys

Redis-cli'ye ne dersiniz KEYNAME | wc -c