Почему падает postgres в dockerswarm?

Question

[igortru]

Развернута небольшая БД в docker swarm, в сервисе контейнеров 70-100 один из них postgres 13.
Размер БД около 30Гб.
Время от времени postgres падает, ошибка:

2025-03-27 14:10:55.459 MSK [26] LOG:  invalid record length at 4B/9E74E190: wanted 24, got 0
2025-03-27 14:10:55.459 MSK [26] LOG:  invalid primary checkpoint record
2025-03-27 14:10:55.459 MSK [26] PANIC:  could not locate a valid checkpoint record

после ремонта оно может работать 1-3 месяца и опять.

Вынес на отдельную vm, думаю сейчас будет работать стабильно. Непонятно почему оно регулярно падало именно в docker-swarm ?

Comments

[Сергей Соловьев]

Сложно сказать почему - причин может быть много. Например, fsync = off в конфигурации и он не смог отработать. С дисками все нормально?

[igortru]

fsync = off не указан, предположения два:
1) какая-то внутренняя кухня swarm когда запускается один контейнер а второй еще не выключен и они используют общий volume но для postgres количество реплик (запущеных инстансов) указано = 1
2) что-то с overlayfs но другие инстансы в docker работают без проблем

[Антон Горецкий]

Почему падает postgres

А вы ему подпорки пробовали ставить? Чтоб не падал :)

Answer 1

[chupasaurus]

Эта ошибка из-за двух реплик, смотрящих на один WAL в общем томе.