Как ускорить вставку в цикле MySQL?

Question

[Ramm]

Выполняю вставку в таблицу в цикле (около 20к записей), выполняется довольно долго (несколько минут).
Когда открываю транзакцию перед циклом, а после делаю коммит, вставка проходит очень быстро. Хотелось бы узнать почему? И какие еще есть "фишки" для ускорения выполнения запросов (insert, update) ?

Answer 1

[Vitaliy Orlov]

Проблема в том, что при выполнении каждого запроса, происходит автокомит, что в свою очередь нагружает диск.
Установи autocomit=0 и после выполняй COMMIT, после порции отправленных данных.

Транзакция помогает именно по тому, что старт транзакции устанавливает autocomit в 0, а по завершении возвращает его в исходное состояние.

Ну, и как говорили, объединяй данные в группы. Так же если это не критично и единичная операция, можно отключать проверку внешних связей (foreign_key_checks=0) и уникальных ключей (unique_checks=0)

Answer 2

[Илья Караваев]

А вы не пробовали сформировать один пакетный запрос и выполнить его?

INSERT INTO `table` (`field`) VALUES (1), (2), (3);

Comments

[Ramm]

Пробовал, выполняется также долго

Answer 3

[Андрей Николаев]

А у Вас таблица в MyISAM или InnoDB ?

Comments

[Ramm]

InnoDB

[Илья Караваев]

Ramm: InnoDB пересчитывает индексы для каждого запроса на обновление и вставке...