Работа с удаленной базой данных MySQL. Почему медленная передача данных?

Question

[FEDAR]

Привет.
Приложение на laravel 5.
В целях конфиденциальности база отдельно (собственник сервера один), код и картинки отдельно (собственник второй).
Объемы данных ворочаются большие. Когда все в куче на одном сервере (xeon 4core, 16gb ram, ssd) - все работает.
Когда настраивают подключение к базе данных RDS AWS Amazon - еле-еле ползает. Хоть и сервер выбирают мощный.
Что упустили в такой конфигурации?

UPD Инстанс с бд amazon во франкфурте, сервер в Вильнюсе. Согласно кода подключение к БД не закрывается. Laravel 5 eloquent делает жадную загрузку. Проблемы N+1 не должно быть
На сервере выделенка на 1 гигабит. Как можно найти сетевые задержки или проверить производительность tcp. Сервер ubuntu 14.04

Comments

[FEDAR]

Спасибо Anton B , Алексей Уколов и andreyvlru все таки проблема была в DNS. И спасибо всем откликнувшимся. Очень медленные коннекты к MySQL (skip‐name‐ resolve) и тут Почему PDO::__construct время от времени выполняет...

Answer 1

[Anton B]

Если у вас MySQL, возможно проблема с DNS.
Попробуйте

[mysqld]
# Skip reverse DNS lookup of clients
skip-name-resolve

Comments

[Igor Makarov]

Anton B это разве замедляет передачу данных после установки соединения?

[Алексей Уколов]

Igor Makarov: это замедляет установку соединения

[Алексей Уколов]

У меня когда-то была проблема как раз с этим - Почему PDO::__construct время от времени выполняется 5 секунд?

[Igor Makarov]

Алексей Уколов согласен, но Вы невнимательно прочли мой вопрос
> после установки соединения

[Алексей Уколов]

Igor Makarov: я внимательно прочитал ваш вопрос :) После установки соединения этот флаг, разумеется, не влияет на скорость работы. Но соединение еще нужно установить, а формулировка вопроса очень расплывчатая. Именно об этом я и написал.

[Иван]

[mysqld]
# Skip reverse DNS lookup of clients
skip-name-resolve
А где это прописать?

[Иван]

Иван, понимаю что в конфиг, но как редактирвать конфиг mysql на амазоне?

[Иван]

Иван, сделал это через Parameter Group, но не помогло

Answer 2

[Алексей Уколов]

Что упустили в такой конфигурации?

Сетевые задержки?

Comments

[FEDAR]

Совсем не понимаю в сетях. Это на какой-то из машин будет проблема?

[throughtheether]

halenharper: пинг между машинами

Answer 3

[Пума Тайланд]

у вас поди серверто не в амазоне а базу вы вдруг решили в амазон положить глупо

Comments

[FEDAR]

Да, Вы правы. База на амазоне, а сервер в офисе в Литве. Можете пояснить мою глупость? как следует сделать для разделения базы и приложения?

[Пума Тайланд]

halenharper: ну вот у вас сервера в разных странах
а это пинг большой
то есть любой обращение между серверами предположим будет минимум 100мс так как быстрее чем сигнал электрический по проводу бежит скорости не достичь
итого если вы написали хорошо приложение и у вас всего 10 вызовов бд на странице то они будут выполняться минимум за 1 секунду с учетом того что база у вас работает моментально
а если вы говнокодер коих большинство то у вас под сотку быть вызовов к бд то это уже 10 секунд на открытие страницы
а так же если вы говнокодер и открываете и закрываете соединение к бд каждый раз то это уже 30 секунд минимум на открытие страницы

частично улучшить ситуацию может скажем поднятие инстанса во франкфурте или ирландии, так как по дефолту инстаны создаются в америке что очень далено и пингу туда местами 250 мс что ещзё больше ухудшает ситуацию

[FEDAR]

Пума Тайланд: про качество кода не скажу хорошо. На главной странице выполняется 13 запросов к бд. Соединение не закрываю. Инстанс во франкфурте.

[Пума Тайланд]

halenharper: ну тогда за несколько секунд должна каждая страница открываться, но в целом держать так далеко бд и сайт бесмысленно медленно и ничего тут не поделаешь скорее всего.

Answer 4

[Андрей]

Самое простое и часто встречающее в данной ситуации - долгий ресолв через DNS
остальное из имеющейся информации тяжело сообразить

Answer 5

[throughtheether]

Что упустили в такой конфигурации?

Как вариант, низкая производительность tcp.

Comments

[FEDAR]

Не совсем понимают. На сервере где код лежит - канал на 1 гигабит

[throughtheether]

halenharper: производительность TCP также зависит от RTT (пинга) между машинами, наличия и процента потерь, настроек ОС.

Answer 6

[He11ion]

Традиционный ответ - либо переносите все максимально близко (в идеале 1 ДЦ вообще), либо по-максимуму кэшируйте все, что приходится доставать с удаленной БД, либо поднимайте зеркало на локальной машине с малокритичными данными, уменьшая кол-во передаваемого по сети.
Ну или все это сразу.