Как реализовать хранение пар ключ-значение?

Question

[zxmd]

Есть задача, записывать и получать доступ к примерно 90-100 млн значений в день. Поиск по ключу (int) - результат тоже int. Очень критично время поиска для такого хранилища. Объем записей не превышает 1 млн операций, объем доступа примерно 20-30 млн.

Рассматривались разные варианты из тех с чем работал: Pg, MySQL, MongoDB, memcached.
Указанные хранилща мало подходят. Мемкеш подходит по скорости, но не подходит по хранению (данные должны сохраняться).

Что можете посоветовать? Может, касандра или еще какая "экзотика" ?

Comments

[zxmd]

Да вот еще сразу сопутствующий вопрос - кто нибудь юзал Riak? Вроде должна хорошо лечь в качестве хранилища.

Answer 1

[Сергей]

За riak

Answer 2

[EminH]

A записывать прямо в файл ? имя файла = ключ, содержимое = значение.
Для redundancy можно через NFS, если локально то ssd должно работать шустро

Comments

[zxmd]

Проблема со скоростью доступа, ну только если все дело в VFS хранить.

Answer 3

[Александр Мелеховец]

Мемкеш подходит по скорости но не подходит по хранению (данные должны сохранятся).

A Redis?

Comments

[zxmd]

Честно говоря не работал с ним напрямую. Спасибо за совет, попробую.