Масштабирование sql базы: можно ли настроить в Spring Boot?

Question

[Nastya1920]

В приложении есть база данных postgresql, и мне необходимо обеспечить максимально быстрый отклик за запросы и максимальную надежность (доступность и избежание потери данных).
Читала о возможностях репликации бд (мастер-слейв-виднесс), а также о partitions с целью масштабирования. Но как это технически должна настроить я как разработчик - пока не разобралась.
Буду очень благодарна за советы и полезные источники с примерами

Comments

[Dmitry Roo]

Этот отклик на что? На запросы пользователя? На запросы в API?
И что такое "максимально быстрый отклик"? У вас какое-то соревнование?

[Nastya1920]

Dmitry Roo, речь о бд, которая участвует в цепочке кросс-сервисного взаимодействия. То есть скорость обработки запроса от пользователя (например, поиск подборки информации по хитрому составному фильтру и отправка списка на фронт) получается в любом случае не молниеносная. Поэтому важно, чтобы поиск (например) в этой бд был организован максимально оптимально. Насчет построения быстрых запросов в бд (без кучи лупов и вложенных запросов) - это понятно.
Плюс хранится там будут важные коды, важна доступность: если упадет бд, слишком дорого обойдется. То есть как я понимаю, мне нужна система репликации: отправляю в мастер, данные копируются в слейвы. Если вдруг мастер упал, то его роль должна автоматом перейти к кому-то из слейвов (наверно, виднесс это отслеживает, если верно понимаю). Вопрос в том, что я ни разу не писала подобного кода и нуждаюсь в совете, как это принято делать.

Плюс масштабирование. Осуществляет ли postgresql разбивку на partitions динамически сама (наверно, нет), или как эту функцию явно включить, если я предполагаю, что бд может не справиться с потоком запросов.

[Сергей Горностаев]

Nastya1920,

Осуществляет ли postgresql разбивку на partitions динамически сама (наверно, нет)

В последних версиях есть из коробки.

[Nastya1920]

Сергей Горностаев, спасибо, круто, но я должна где-то в конфиге это поставить на "on" - или подразумевается, что это автоматическая оптимизация со стороны бд?

[Сергей Горностаев]

Nastya1920, https://postgrespro.ru/docs/postgresql/12/ddl-part...

[Dmitry Roo]

Nastya1920, так чем не устраивает время отклика, которое у вас сейчас? Вы, предположим, потратите время на какие-то оптимизации, отказоустойчивать, а у вас как было 100 запросов за день, так и осталось...

Answer 1

[Сергей Горностаев]

Во-первых, вы никак не должны настраивать это, как разработчик, должен DBA настроить СУБД. Во-вторых, вы уж простите, но уже к тому времени, когда уровень системы добирается до появления вопросов масштабирования хотя бы СУБД, ей нужны профессионалы с как минимум десятилетним стажем, которого у вас явно нет. Многие системы вообще никогда не добираются до этого уровня.

Вы уверены, что ваша добралась?

Comments

[Nastya1920]

Я с вами абсолютно согласна. Однако, к сожалению, везде хотят человека-оркестра по системе полного цикла разработки. И кроме девопса, архитектора, фронтэндщика и бэкэндщика, оказывается, еще и бд надо уметь настроить со всех сторон)
Учитывая, что это серьезная фирма, а не молодой стартап, приходится рыть по всем фронтам.

[Сергей Горностаев]

Nastya1920, искренне желаю вам удачи, так как это будет бесценный опыт и привлекательный для нанимателей стаж, если справитесь. Но очень надеюсь, что ваши наниматели понимают, нельзя такое вещать на новичка.

[Nastya1920]

Сергей Горностаев, спасибо огромное, я тоже надеюсь)

[Сергей Горностаев]

Nastya1920, рекомендую почитать это, хотя бы получите общие представления о предмете, знания которого от вас ожидают.