Как скопировать определенные страницы сайта?

Question

[koskanalya]

Здравствуйте, мне нужно скачать список определенных страниц сайта по id. Например site.ru/?id=1 - site.ru/?id=4000, но весь сайт целиком качать не вариант там более миллиона страниц.... Как то по маске можно сохранить только определенные страницы? В софте типа HTTrack Website Copier нет функции отдельного скачивания... Может что то другое есть?

Comments

[Владимир]

Непонятно зачем веб разработка в тегах.

[wisgest]

Похоже, можно и в GUI и в CLI:
https://www.httrack.com/html/step9_opt4.html
https://www.httrack.com/html/scripting.html
Когда разберётесь, напишете ответ.

Answer 1

[SagePtr]

В bash или zsh: wget https://example.com/?id={1..4000}

Answer 2

[Максим]

Почитайте про веб-скрапинг с помощью Node.js + Puppeteer