Как увеличить скорость добавления данных в базу данных mysql?

Question

[Gabe_B]

В БД импортировали через phpmyadmin около 200 тыс строк: id, число, число, дата
Новое добавление происходит по CRON раз в 5 минут, но добавляться данные стали очень медленно и чем больше записей, тем медленнее. Подскажите неопытному, как можно решить эту проблему?

Comments

[Sergey В.]

какие индексы есть в таблице?

[mahmudchon]

Отвечая на Ваш вопрос - купить сервер мощнее.

[Anonymous]

Запрос покажите

[Anonymous]

mahmudchon, не всегда это помогает. Иногда сервер не раскрывает всю свою мощь, и надо тюнинговать БД. Оптимизация, и все такое...

[Александр]

Делай вставки пачками

[Gabe_B]

Александр, спасибо, за ответ!
На стороннем сайте есть json, я использую curl и полученный ответ записываю через foreach в бд

Answer 1

[Ипатьев]

Чтобы решить проблему, её надо сначала сформулировать.
В данном случае никакой проблемы нет, есть невнятные страдания.
Ни кода, ни внятного описания проблемы, ни даже пояснения, что имеется в виду под "добавлением" в вопросе нет.

В простейшем случае либо делать один множественный запрос insert, либо заключить отдельные запросы insert в транзакцию

Comments

[Gabe_B]

Под "добавление" имеется ввиду "INSERT", конечно.

[mayton2019]

Gabe_B, там разные стратегии оптимизации. Если идет внутренний insert as select из одной таблицы в другую - то будет одни рекомендации.

Если идет batch insert извне в таблицу - то другие.

[Gabe_B]

mayton2019, спасибо, за ответ!
На стороннем сайте есть json, я использую curl и полученный ответ записываю через foreach в бд

[ThunderCat]

Gabe_B,

На стороннем сайте есть json, я использую curl и полученный ответ записываю через foreach в бд

ппц, это вообще близко не лежит к сути вопроса и меняет его кардинально. Собственно 99% времени вашего запроса очевидно тратится на получение и обработку данных. Сам инсерт скорее всего происходит практически мгновенно.

[Ипатьев]

Gabe_B, я же все написал:
либо делать один множественный запрос insert, либо заключить ваш foreach в транзакцию

какой ещё ответ вам нужен?

[Gabe_B]

ThunderCat, Вы были правы, инсерт происходил мгновенно, оказалось, ошибка была на другой стороне )

Ипатьев, ответ на вопрос - почему русскоязычные пользователи подобных сайтов такие токстичные ) вас в детстве обижали?