Долго заливается дамп базы MYSQL. Почему?

Question

[Dos]

Всем привет! Есть база mysql размером 670 мб. Установлена на Ubuntu 18. Был переезд на новый сервер и дамп стал долго загружаться. Вот вид из консоли https://cloud.mail.ru/public/3hPj/3neoXmPjV

Запуск команды Mysql -v -u root -p main_data < /tmp/dump....sql

Что может быть не так? Как ускорить?

Comments

[N]

Попробуй такие ключи добавить к команде mysql...

--add-locks — опция, которая добавляет команды LOCK TABLES перед выполнением и UNLOCK TABLE после выполнения каждого дампа таблицы. Применяется для ускорения доступа к MySQL;

Опции --quick и --opt рекомендуется использовать, если база данных MySQL слишком большая для того, чтобы целиком поместиться в памяти.

Answer 1

[kocherman]

Не создавайте индексы до добавления данных.
Типичный дамп БД состоит из двух разделов:
1. структура БД
2. данные БД
В структуре БД создаются таблицы: их поля и индексы.
Вам нужно вырезать код этих индексов и добавить создание индексов в конец дампа.
Тогда скорость импорта дампа вырастет раз в 50.
Также на скорость работы влияет тип таблиц - myisam работает быстрее innodb.

Comments

[Александр Черных]

кстати phpmyadmin дампит "правильно". в его дампе индексы в самом конце, после даты

[N]

Ну про то, что без индексов "быстрее" - думаю понятно изначально)
Вопрос то автора в том, что этот же дамп(!) на другом(!) сервере быстрее :)

[N]

P.S.: Если этот дамп постоянно "гоняется" с сервера на сервер, то, конечно, имеет смысл пересмотреть структуру дампа...

[kocherman]

N, Если не индексы, то тип таблицы, версия mysql либо вовсе железо или нагрузка другими процессами. Что может быть еще?

[N]

kocherman, Ну я и имел ввиду, что "что-то" относительное ищем) Дело не в самом дампе у него)

Answer 2

[Алексей Царапкин]

670 мб не должны заливаться быстро =)

Comments

[Dos]

Да, но раньше было быстрее ощутимо

[Алексей Царапкин]

может сервер не такой шустрый, может загружен чем-то. Смотреть надо.

[N]

Dos, Может раньше и БД меньше была? :)

[N]

Ну сверь ещё конфигурацию самого MySQL...сколько чего ему там выделено...как вариант...

[Dos]

N, нет. Размер был такой же) Где смотреть конфиги? Здесь /etc/mysql/mysql.conf.d/mysqld.cnf? Какие именно параметры должны быть? Может влияет это:

key_buffer_size		= 16M
max_allowed_packet	= 16M
query_cache_limit	= 1M
query_cache_size        = 16M

[N]

Dos, Чтобы тут не расписывать, вот например статья, какой принцип настройки MySQL надо использовать:
https://ruhighload.com/%D0%9E%D0%BF%D1%82%D0%B8%D0...

А тут готовые (примерные) конфиги можно найти по настройке для того или иного объёма памяти на сервере:
https://ruhighload.com/mycnfexample?ram=1

Answer 3

[edo1h]

быстрее перести каталог базы рсинком или mariabackup (если у вас mariadb)