Как добавить поле в высоконагруженную базу в таблицу на продакшене где 100 миллионов записей?

Question

[ggrachdev]

Как можно добавить поле в высоконагруженную базу в таблицу на продакшене где 100 миллионов записей в разные базы данных без ее отказа?

Comments

[ggrachdev]

Лентюй, интересно как это сделать и для этого и для того

[Webber]

ggrachdev, если в postgres ставите nullable и за секунду добавится. главное дефолт значение не ставьте кастомное

[mayton2019]

Мне кажется вопрос должен идти не хотелки а от ошибки. Есть ошибка alter table add column?

Какая она?

Убежден что существуют архитектуры наподобие EAV, которые не различают ddl/dml и соответственно не фиксирут проблем при модификации схемных объектов.

Автор у тебя EAV?

Answer 1

[Melkij]

Могу ответить про postgresql.

без ее блокировки

Именно в такой постановке вопроса - никак.

С короткой блокировкой (доли секунд) - другое дело. Принципиально зависит от конкретного alter table и версии базы
Простой alter table foo add column col; - ставите statement_timeout to '100ms' и вносите как есть.
alter table foo add column col default const - после pg11 см. выше, до - интересное приключение
Если default не константа - сначала внесите как default null, затем обновляете частями. как в процессе до pg11.

Answer 2

[d'Ivan]

В MySQL 8+ добавили ALGORITHM=INSTANT к синтаксису:

ALTER TABLE table_name [alter_specification], ALGORITHM=INSTANT;

The benefit of the INSTANT algorithm is that only metadata changes are made in the data dictionary. There is no need to acquire metadata lock during SE changes and we don’t touch the data of the table.

https://mysqlserverteam.com/mysql-8-0-innodb-now-s...

Answer 3

[Vitalii]

Как вариант для MySQL можно заюзать утилиту от гитхаб https://github.com/github/gh-ost