В postgresql параметр max_wal_size — размер всех сегментов или одного?

Question

[igortru]

Привет.

Параметр max_wal_size это размер одного сегмента wal или всех суммарно?

Answer 1

[Melkij]

Ни то ни другое.

max_wal_size - пороговое значение, при срабатывании которого начинаем checkpoint. Ближайший родственник checkpoint_timeout, только checkpoint_timeout вызывает checkpoint по прошествии указанного времени с прошлого чекпойнта, а max_wal_size - после записи такого объёма WAL. Работают оба, чекпойнт начинается смотря что произойдёт раньше.

Comments

[igortru]

т.е. max_wal_size вообще не регламентирует размер директории - pg_wal? Верно ли я понимаю что max_wal_size это количество данных переданных в wal но не размер директории или размер файла wal?
Если мне условно нужно хранить wal для последние 12 часов то это можно сделать c помощью wal_keep_size ?

[Melkij]

нет, никак не ограничивает. Размер одного сегмента WAL - это wal_segment_size. Задаётся только при initdb и меняется только чёрной магией которую я описывать не буду потому что часто приводит к необратимой потере всей базы.

Если мне условно нужно хранить wal для последние 12 часов то это

То это странная постановка задачи, уточните настоящую цель.

[igortru]

Melkij, patroni, 5 нод, одна из реплик бывает отьезжает на 5-8 часов, нужно что-бы она нашла нужные ей wal на мастере и встала в строй. Бекапы с помощью wal-g, знаю что можно решить с помощью restore_commannd но пока не изучал этот вариант.

[Melkij]

restore_command = 'wal-g wal-fetch "%f" "%p"'
раз архив есть всё равно.

wal_keep_size (wal_keep_segments) константного размера хранение избыточных WAL как раз для реплик
или слоты репликации. Если будете делать слоты - то желательно выставить какой-то max_slot_wal_keep_size чтобы забытый слот не уронил собственно базу, тем более если с мастера реплицируете

по времени возможности нет.

[igortru]

Melkij, Спасибо за ответы. Раз уж коснулись wal-g, каким образом wal-g понимает (берет список wal) для передачи в параметры %f %p- wal-fetch "%f" "%p"' ?

Если я правильно понимаю то при восстановлении LATEST бекапа, при запуске postgress restore_command начинает получать wal и "проигрывать" их.

[Melkij]

%f , %p и ещё пару замен делает в этой строке сам postgresql перед запуском этой команды на выполнение. Для запущенной команды на этих местах будут действительные строки с конкретным именем сегмента WAL и куда именно его надо положить для продолжения восстановления.

Подход простой, хотя и архаичный. Закончили redo сегмента - дёрнули restore_command для получения следующего сегмента.

[igortru]

Melkij, Благодарю!

Answer 2

[Zerg89]

Параметр max_wal_size сообщает PostgreSQL, каким должен быть приблизительный максимальный общий размер хранимых сегментов WAL.