Как уменьшить потребление памяти в redis cluster 3.0.2?

Question

[Fixid]

Добрый день. Мигрируем с простого redis в redis cluster из 4 мастеров и 4 слейвов.
Тестовая база занимает 170мб в rdb файле.
В одиночном redis 3.0.2 64bit потребление памяти 391мб. Отношение сырых данных к потреблению памяти 2,3
В redis cluster 3.0.2 32bit суммарное потребление памяти мастерами 573 мб. Коэффициент равен 3,4
В redis cluster 3.0.2 64bit суммарное потребление памяти мастерами 695 мб. Коэффициент равен 4,1

Можно ли оптимизировать потребление памяти в redis cluster 3.0.2 64bit?

Answer 1

[LittleFatNinja]

это же redis, так надо

Answer 2

[Пума Тайланд]

так в rdb у вас данные пожатые гзипом

Comments

[Fixid]

Сжатие rdb отключено, есть открыть rdb файл данные будут в текстовом виде

[Fixid]

Плюс исходный набор данных везде одинаков, а потребление сильно различается

[Пума Тайланд]

Fixid: сказать честно на таких обьемах даже стыдно задумываться

[Fixid]

Сделал базу с 18гб rdb файлом, в оперативной памяти это заняло 74гб, соотношение осталось 4,1
Думаю теперь база достаточно большая

[Пума Тайланд]

Fixid: измерьте разиер данных в программе а не в рдб файле

[Пума Тайланд]

Fixid: на вскидку
redis.io/topics/memory-optimization
stackoverflow.com/questions/10004565/redis-10x-mor...
labs.octivi.com/how-we-cut-down-memory-usage-by-82

[Fixid]

Пума Тайланд: какой именно параметр info нужен? Все что приведено выше это значение used_memory_human

[Пума Тайланд]

Fixid: давайте вы будете смотреть сколько редис жрет в памяти хотя бы в top а не то что он вам написал.
Ну и данные померьте в программе сколько они у вас весят, а не в редисе

[evnuh]

Fixid: не слушайте его, он троль

[Fixid]

Пума Тайланд: проверил через top, суммарное потребление памяти 74,9гб
Спасибо за ссылки, первые две давно приняты к сведению