Как удалить дубликаты постов в Wordpress через sql команду?

Question

[harindmitrii]

Всем привет. Сайт на WP, более 700 000 постов. Нужно удалить дубли. Пробовал в phpmyadmin вводить запрос:

DELETE t1 FROM `wp_posts` AS t1,`wp_posts` AS t2
WHERE t1.`post_title`=t2.`post_title` AND t1.ID>t2.ID

Сначала возникала ошибка 504 gateway time-out. Изменил параметры в nginx.conf:
было:
proxy_connect_timeout 600;
proxy_send_timeout 600;
proxy_read_timeout 600;
send_timeout 600;
изменил:
proxy_connect_timeout 8400;
proxy_send_timeout 8400;
proxy_read_timeout 8400;
send_timeout 8400;
После этого sql запрос долго обрабатывался, в итоге при заходе на все сайты сервера выводилась ошибка "Error Establishing Database Connection".
Подскажите какие настройки конфига сервера можно сделать чтобы выполнить sql запрос до конца. Возможно ли изменить sql запрос чтобы дубли удалялись в указанной рубрике (категории) дабы уменьшить объем операции, разбив ее на несколько частей?
Перепробовал кучу плагинов для удаления дублей постов. Не один не справляется.

Comments

[Максим Осадчий]

Если задача разовая - может попробовать лимитировать запрос и выполнить в несколько итераций?

[harindmitrii]

Максим Осадчий, было бы не плохо, не подскажете как лимитировать запрос?

[Максим Осадчий]

harindmitrii, в конце запроса LIMIT n

[harindmitrii]

Максим Осадчий, Ввожу:

mysql use ct14904_3; DELETE t1 FROM `wp_posts` AS t1,`wp_posts` AS t2
WHERE t1.`post_title`=t2.`post_title` AND t1.ID>t2.ID LIMIT 10

Выдает ошибку:

#1064 - You have an error in your SQL syntax; check the manual that corresponds to your MariaDB server version for the right syntax to use near 'LIMIT 10' at line 2

[sema_and]

Как вы решили вопрос с удалением дублей? У меня 140.000 записей. Ничего не получается.

Answer 1

[Орхан Гасанлы]

Может стоит установить плагин https://ru.wordpress.org/plugins/delete-duplicate-...
Он умеет по крону ежечасно запускать удаление дублей...

Comments

[harindmitrii]

Этот плагин тоже пробовал. Тоже не справляется. Бесконечно обрабатывает что-то, в итоге весь сервер зависает. Слишком большая БД. Поэтому нужно делать через sql ограниченными запросами. Только дело в том, что не хватает навыков чтобы запрос переделать, лимитировать его или выполнять для постов опубликованных в определенном диапазоне дат или для постов в определенной категории.

[sema_and]

Да, до 50.000 строк плагин справляется. А вот дальше нет.

[Орхан Гасанлы]

Так можно крон задачу поставить и удалять по 10 000, например

[sema_and]

Когда больше 50.000 строк то при входе в плагин он долго думает и потом выдает пустой экран.

Answer 2

[eremenkoEvgeniy]

Привет, такой же вопрос
Удалось как-то через sql вычислить дубли?

Comments

[Andrey]

DELETE t1 FROM `wp_posts` AS t1,`wp_posts` AS t2
WHERE t1.`post_content`=t2.`post_content` AND t1.ID>t2.ID

Сработало (источник delete duplicates of posts in WordPress), но мне более удобно работать с плагином, в базе боясь сломать что-то
Плагин:
https://wordpress.org/plugins/trash-duplicate-and-...