Из за чего затупы при большом количестве вставок в postgresql?

Question

[Пума Тайланд]

Есть большой сервер с 64 гигами оперативы и ссд дисками, сервер не перегружен лоад аверейдж чуть больше 1.
На нем крутится postgresql 9.4
Настройки типо таких
max_connections = 1000
shared_buffers = 16GB
effective_cache_size = 48GB
work_mem = 16777kB
maintenance_work_mem = 2GB
checkpoint_segments = 32
checkpoint_completion_target = 0.7
wal_buffers = 16MB
default_statistics_target = 100

Время от времени при вставке происходит затуп на 1-5 секунд, что смертельно конечно.
Вставок много, сотни в парралель в секунду.

Comments

[Андрей]

сервер с 64 гигами оперативы
max_connections = 1000

жесть какая. Вы считать умеете или невнимательно читали про настройку постгреса.

[Пума Тайланд]

Андрей: ну тысячи коннектов мне хватает а 500 не хватает, что я должен тут считать то?

Answer 1

[Андрей Буров]

Если возможно делайте вставки пачками (с помощью транзакций)
Убирайте лишнее индексы (они сильно тормозят вставку)
Вырубайте fsync - (на свой страх и риск)

https://vimeo.com/123424249

Comments

[Пума Тайланд]

нет возможности данные приходят от клиентов кусками по 100 - 200 байт
индексов толком и нет, данные все числовые + айпишник
фсинк не готов выключить так как в итоге при резком ребуте я получу 100% мертвую бд и простой дикий.