Как масштабировать БД, если основная нагрузка на запись?

Question

[Ivanoff-i]

Собственно, вопрос. С нагрузкой на чтение понятно, в мастер пишем, со слейвов читаем. А как быть с нагрузкой на запись? Как обеспечить согласованность, если писать на разные сервера? Как обеспечить, например, уникальность значений? Как вообще все это делается?

Answer 1

[Алексей Лебедев]

Партицирование
https://ru.wikipedia.org/wiki/%D0%A1%D0%B5%D0%BA%D...

Answer 2

[lega]

Как обеспечить, например, уникальность значений?

Для этого можно использовать шардинг, ключевое поле (индекс) бъется на диапазоны и данные разносятся по серверам, при этом уникальность сохраняется для ключевого поля.

А как быть с нагрузкой на запись?

Можно использовать ssd вместо, hdd, можно разместить базу в RAM, можно использовать inmemory БД.

Если результирующие данные сразу не нужны, то можно писать просто в файл подряд (это позволяет писать 1..10Млн записей в сек, никакая БД вам столько не даст), а далее например воркерами разгребать и размещать по кластеру или ещё куда.