Почему восстановленная БД работает намного медленнее чем оригинальная?

Question

[lightseeker]

ДБ в AWS RDS размером 5TB. Поднимаю еще один инстанс из бекапа (сервер по характеристикам один и тот же, даже чуть мощнее ), но запросы на этом инстансе выполняются гораздо медленнее ( а то и вообще длятся 20-30 минут ). В чем может быть проблема? Проверял DDL таблиц, все в порядке с индексами.

Comments

[mayton2019]

Бери самый тяжелый запрос и сравивай его планы на обоих БД. Другого пути скорее всего нет.

[lightseeker]

mayton2019, тот же самый план для обоих

[mayton2019]

lightseeker, там есть EXPLAIN TIMING который показывает время исполнения каждого узла плана.

Вот сделай как здесь https://www.postgresqltutorial.com/postgresql-tuto...

[lightseeker]

vilinyh, смотрел, там кроме моего запроса ничего не происходит, да и не должно потому что инстанс нигде не юзается. В том и как раз проблема - инстанс с %0 usage-ом намного медленее инстанся на котором постоянно 50-60% нагрузка

[lightseeker]

mayton2019, там единственние различие здесь

Index Only Scan using rumors_idx_k_temp on rumors  (cost=0.71..996126.26 rows=428050 width=0) (actual time=14.384..128.983 rows=5795 loops=1)

Index Only Scan using rumors_idx_k_temp on rumors  (cost=0.71..996126.26 rows=428050 width=0) (actual time=3260.294..17104.109 rows=3374 loops=1)

[mayton2019]

Есть предположение что у тебя параллельно идет еще какая-то дисковая активность. Может вакуум проснулся. Может AWS RDS в это время что-то бэкапирует. Вот в первом комментарии один господин советует смотреть в мониторинг. Я без книжки не помню какие там таблицы. Давно это было. Вобщем передаю эстафетную палочку тем кто точно знает куда смотреть.

Answer 1

[Roman K]

AWS лимитирует IOPS. Ты их израсходовал на бурст в виде восстановления бэкапа. Или покупать лучше тариф, или ждать восстановления лимитов

Comments

[lightseeker]

Спасибо за ответ. Где именно можно найти эти лимиты и их состояние?

[lightseeker]

vilinyh, Спасибо. И еще один вопрос если позволите - почему лимит ИОПС-а распростроняется только на ДБ который был восстановлен из бэкапа. Почему продакшн ДБ по прежднему работает как надо

[Roman K]

lightseeker, потому что на проде у тебя нет всплесков нагрузки в обычном режиме, видимо

Answer 2

[Vitaly Karasik]

С одной стороны, Roman Kitaev прав - IOPS limit могут быть.
Но - AWS дает 3IOPS на 1GB, и для 5TB мы имеем 15000 IOPS (а диск наверно еще больше)- это много. Так что не уверен что мы утыкаемся в IOPS.
Советую посмотреть в старом и новом инстансе на
1) monitoring tab - IOPS read and write
2) RDS Performance Insights
и сравнить