Где хранить контент — в Монго или файловой системе?

Question

[jeruthadam]

Добрый вечер. Вопрос может показаться наивным, но хочется разобраться и подтвердить вывод какими-то фактами.

С точки зрения нагрузки и производительности, где будет лучше держать контент для сайтов, которые его получают по API - в файле JSON или в Монге? Как провести сравнение нагрузки?

По идее, прочитать файл много ресурсов не надо. Может быть его вообще можно как-то загружать в память процесса? Потому что если оборащатся к файлу каждый раз, то это большая нагрузка на файловую систему. Файл JSON, кстати, раздается у меня сервером на Ноде, если имеет значение.

В то же время у Монги может быть какая-то оптимизация этого процесса, не даром же такие вещи вообще существуют.

Answer 1

[semt1]

Из БД - удобнее.
Из файловой системы - дико быстро.

Если нагрузка небольшая, если ресурсов хватает - берите из БД.
Если проблемы с нагрузкой - берите из файла.

Comments

[jeruthadam]

Интересно, я думал наоборот. Из файла удобно и просто все сделать, но медленно. А из БД надо разбиратся, нр зато быстро))

[semt1]

jeruthadam, с чего это из БД быстро.
БД в конечном итоге в файлах лежит.

Answer 2

[Алексей Ярков]

Файлом дешевле как по мне. Плюс кеширование включить.

Comments

[jeruthadam]

Что за кеширование? Какую нагрузку сможет выдержать такой сетап?
И почему дешевле? Все на VPSке.

[jeruthadam]

У меня сейчас так

const apiData = require('../data/articles.json')

Просто реквайрю JSON.

[Алексей Ярков]

jeruthadam, дешевле - не в $, а по ресурсам.
Ведь гораздо легче отдать статику, чем делать запрос в БД, пусть и крохотный.
Ну и не отдавайте нодой в мир, а проксируйте Nginx-ом к примеру. Вообще пушка будет )

[jeruthadam]

Алексей Ярков, я на клиент не отдаю голый JSON, в том-то и дело. Там будет 100 статей, зачем мне их на клиент посылать, если юзер открыл страницу с одной статьей. Поэтому nginx отпадает.

[jeruthadam]

О блин, сейчас посмотрел, а ведь у меня всегда летит JSON целиком. Хм...А как выборку делать? На сервере? Это наверное здорово затормозит

[Алексей Ярков]

А как выборку делать

Ну делать find({...}) и отдавать назад

[jeruthadam]

find({...})

На ноде? Тогда же nginx в пролете. Что тогда с кешированием делать? Чтоб не обращатся к файловой системе каждый раз.

[Алексей Ярков]

jeruthadam, ну вы остановитесь на чем-то уже. Выборку из файла вы не сделаете, только из БД. Так что решайте по ситуации.

[Abcdefgk]

Нода в режиме production кеширует статику. Если эти файлы в папке public, то они сразу после запуска приложения уже в памяти. Что может быть быстрее, чем из памяти?

[jeruthadam]

Abcdefgk, я не отдаю статику нодой.
const data = require('articles.json')

[Abcdefgk]

jeruthadam, Если эта строчка вписана в какой-то файл всего серверного кода, то ваш articles.json загружается в память даже и в режиме development. Правда, она не может так выглядеть, может как-нибудь так - const data = require('./articles.json')

[jeruthadam]

Abcdefgk, она загружается единоразово? Есть юзер А запросит этот роут, который закгружает этот файл, а через 5 минут придет юзер Б и запросит эту же инфу, то будет заново обращение к JSON файлу? Или уже из памяти? А откуда он тогда знает что файл не изменился?

[Abcdefgk]

jeruthadam, Если предполагается, что файл будет постоянно изменяться, то тогда его нужно запрашивать именно из файловой системы - сохранять его туда изменённым, потом изменённым запрашивать, - то есть не реквайром, а так -

fs.readFile(path.join(__dirname, './articles.json'), function(err, file) {...});

- то есть абсолютный путь до него, ну и т.д.

Answer 3

[Александр N++]

На дисках в файлах при нехватке места можно будет подключить диск и через симлинк выкрутится.