Как по списку URL-ов удалить страницы, в контенте которых будет текст «Не найдено»?

Question

[Дмитрий]

Друзья, приветствую

Есть список URL-ов сайта (больше 1000)

Задача:
1. узнать, в контенте каких URL-ов есть фраза "не найдено"
2. удалить из списка эти URL или пометить их как-то, чтобы вручную потом удалить.

Как и с помощью чего это можно сделать проще всего?

Спасибо.

Answer 1

[Lander]

1. Взять n-ый урл из списка
2. Запросить через сURL контент страницы
3. Провести поиск в контенте по строке "не найдено"
4. Если результат был найден, то увеличить n на 1 и перейти к п. 1
5. Если результат найден не был, то добавить ссылку в файл, увеличить n на 1 и перейти к п. 1