Как сократить или оптимизировать количество запросов UPDATE к mysql?

Question

[Влад Нестеренко]

Есть необходимость сделать автоматическое обновление цен для магазина, написал , вроде все работает , только обновление выполняется около 20 минут , что не есть хорошо. Выяснил что большое количество UPDATE около 8 тыс, как их можно сократить или оптимизировать , сам запрос такого типа "

UPDATE product SET stock_status_id='7',status='1',quantity='1', price='".$article['PriceUSD'][$el_mass]."' WHERE sku='".$art['sku']."'"

то есть изменятся только price(цена) для каждого запроса.

Comments

[Модератор]

Vlad852 дорогой пользователь, настоятельно рекомендуем еще раз обратить самое пристальное внимание на п. 3.1 регламента работы сервиса (и, в особенности, на его последний абзац).
В противном случае, ваши вопросы будут удаляться по причине тег-спама.

Answer 1

[Camaro67]

Как вариант

INSERT INTO `product` (`sku`, `stock_status_id`, `status`, `quantity`, `price`)
VALUES (...), (...), (...)
ON DUPLICATE KEY UPDATE `stock_status_id` = VALUES(`stock_status_id`), `status` = ...

В данном случае sku должен быть ключом. Если вместо sku есть какой-то другой ключ, используйте его.

Comments

[Влад Нестеренко]

такой запрос будет выполнятся быстрей чем UPDATE?

[Camaro67]

Vlad852, Ну естественно, вы сейчас делаете 8000 запросов, а так вы отправите все одним.

[Rsa97]

Camaro67, В один может и не влезть, надо смотреть установленное ограничение на длину строки запроса, переменная max_allowed_packet.

[Camaro67]

Rsa97, Ну можно и на 2 разбить и на 3, всяко быстрее будет чем 8000 запросов выполнять. Хотя и на дефолтных настройках базы скорее всего все в 1 влезет.

[Влад Нестеренко]

Camaro67, немного не понял как тогда записать в один запрос несколько sku

[Camaro67]

Vlad852, Еще как вариант можете биндить параметры запроса через mysqli. Так тоже прирост по скорости выйдет, если даже выполнять 8000 запросов.

[Camaro67]

Vlad852, VALUES ('sku0', ...), ('sku1', ...), ('sku2', ...)

[Rsa97]

Camaro67, По дефолту до версии 5.6.5 включительно - 1 мегабайт, то есть 131 байт на продукт, выше - 4 мегабайта, 524 байта на продукт.

[Vlad7896]

Camaro67, а для запроса обязательно все поля писать что есть в бд ?

Answer 2

[Борис Сёмов]

Чисто на всякий случай: А по полю sku у вас есть индекс? А то 8000 запросов это плохо, но 20 минут на на 8000 простых апдейтов, это подозрительно много!

Comments

[Vlad7896]

по полю sku нету индекса

[Борис Сёмов]

Создайте, и возможно, вам мне придётся что-то ещё делать пока. =)

Answer 3

[Rsa97]

Для начала замените на подготовленный запрос, тогда он не будет каждый раз компилироваться на сервере.

Answer 4

[Влад Нестеренко]

INSERT INTO `product` (`sku`, `stock_status_id`, `status`, `quantity`, `price`)
VALUES (`sku0`, `stock_status_id0`, `status0`, `quantity0`, `price0`),(`sku1`, `stock_status_id1`, `status1`, `quantity1`, `price1`)
ON DUPLICATE KEY UPDATE `stock_status_id` = VALUES(`stock_status_id`), `status` = VALUES(`status`), `quantity` = VALUES(`quantity`),`price` = VALUES(`price`) , правильно записал если на два sku?