Простой key-value storage для документов

Question

[Zorkus]

Кто в чем посоветовал бы хранить документы (вордовские и прочие офисные файлы?)

Что нужно:

— возможность любому документу давать произвольное число аттрибутов и искать по ним.
— возможность организовывать эти документы в иерархии.
— хотелось бы возможность как-то сжимать документы на диске для экономии места на диске, так как их много.

что НЕ требуется:
— кластеризация, шардинг и прочие навороты на данной стадии
— полнотекстовый поиск

Answer 1

[lorien]

Монга? По поводу сжатия не уверен, можно попробовать гзиповать документы и хранить как binary-данные.

Comments

[deadkrolik]

А у монго какой максимальный размер документа? Вдруг не влезет.

[fozzy]

www.mongodb.org/display/DOCS/GridFS

[lorien]

Вроде 4мб, а для остального GridFS, наверное. Не юзал эту фичу. Для меня монга оказалось очень простой, поставил пакет и всё работает, можно запустить консольу и из неё работать, можно «import pymongo» (я питонер) и примерно тот же синтаксис запросов. Сам синтаксис достаточно внятный. Да я просто не работал с другими документными БД, вот и написал про монгу :)

Answer 2

[Анатолий]

Я бы посоветовал обычный SQL сервер (sqlite как вариант) пара табличек (на документы и на аттрибуты) а сами документы хранить в архивах на жестком диске. Для Вашей цели это вполне хороший вариант, очень распространен, проверен временем и эти сервера есть везде.

Comments

[Zorkus]

Что значит -сервера есть везде? У нас свои сервера стоят, в стойке в датацентре. Как основная БД Oracle, но хранить документы в нем в виде blob-ов не хочется по ряду причин (в том числе, связанных с бекапами/ экспортом-импортом схем и прочее). Хочется отделенное key-value storage.

[Анатолий]

" а сами документы хранить в архивах на жестком диске" Читайте внимательней, не стоит хранить эти документы в базе, отдельно храните в архивах, а в базе лишь ссылку, это удобно и просто.

Answer 3

[rPman]

В windows начиная уже с winxp, а может и раньше, встроен механизм присвоения документам атрибутов, отображения их в проводнике в виде таблицы, поиска по ним (в т.ч. полнотекстовый). Но список атрибутов определяется типом файла… в текстовых документах есть атрибут — ключевые слова.

Свойства файла -> сводка, отображение в проводнике Вид -> таблица (затем меню Вид -> выбор столбцов в таблице)

p.s. мне интересно, хоть кто-нибудь пользовался этим механизмом?

Comments

[Zorkus]

Это для пользователей-людей, мне нужно для бекэнда к системе. Пользователи видят, скажем, ордера в веб-интерфейсе, к ордерам можно приаттачивать документы в качестве обоснований, пояснений, расчетов, комментариев, сканы с печатями и прочее. Но хранить эти документы как blob-ы в БД в дочерней таблицы (по отношению к ордерам) не хочется.