Виртуальные шарды как сущность?

Question

[SKEPTIC]

Изучаю принципы построения высоконагруженных проектов.

Преподаватель рассказывал про шардинг баз данных. В части про виртуальный шардинг он сказал, что на одном сервере поднимается столько процессов, сколько и виртуальных шардов на одном сервере.
То есть если у нас 100 виртуальных шардов на 2 сервера, то мы поднимаем скидываем на каждый сервер по 50 виртуальных шардов - то есть поднимаем по 50 экземпляров СУБД на каждом сервере.

Так ли это? Это должны быть отдельные экземпляры или же отдельные базы данных в одном экземпляре?

P.S. под экземляром понимается процесс СУБД, слушающий коннекты на определенном порту.

Answer 1

[dimonchik2013]

не морочь голову

морочь вот чем: КАК мерять производительность, ответ - Яндекс Танк

учи как его юзать, а тюнинг настроек - он индивидуален + ты вообще спрашиваешь не понимая до конца о чем ))

Comments

[SKEPTIC]

Смотрел серию лекций МФТИ по проектированию высоконагруженных систем. Данный момент непонятен был. За Танк спасибо. А вот на сам вопрос вы так и не ответили.

[dimonchik2013]

я повтрюсь что ты страдаешь фигней, потому что изучив вопрос сам найдешь ответ
но давай подумаем вместе - если ты не на от*бись спрапшиваешь

вот тебе цифра ДВА
два шарда

как ты их сделаешь чтобы выбирать быстрее?

в ДВА демона или в ДВЕ таблицы на одном демоне?

[SKEPTIC]

dimonchik2013, задаю вопрос чтобы узнать ответ

[dimonchik2013]

такие нам не нужны
нужны думающие
учи дальше

Answer 2

[Vitsliputsli]

Это должны быть отдельные экземпляры или же отдельные базы данных в одном экземпляре?

Обработку в несколько потоков обеспечит и 1 инстанс, поэтому в этом плане разницы нет, а несколько инстансов дадут большие накладные расходы. Но, те же самые долгие блокировки возникают из-за ограничений железа, например по IO, которые нужно решать несколькими физическими серверами. Поэтому дело в другом.
Вы создаете 100 шардов и больше для того, чтобы балансировать нагрузку. Т.е. перебрасывая шарды с одного физического сервера на другой, вы сможете распределять нагрузку, а заранее расшардировав на большое кол-во шард, можете это делать гибче не меняя ничего в коде. Заведение шардов на отдельных инстансах удобно для измерения нагрузки на них, именно нагрузки на железо, по-другому ее не замерить. Но заведение отдельного инстанса на каждый шард, тоже веселье, в плане накладных расходов в системе на обслуживание каждого инстанса. Поэтому нет идеального решения, нужно решать для каждой конкретной задачи, и продумывать, как будет выгоднее.