Как скачать сайт с lazy lood?

Хочу скачать сайт, который загружается по мере прокрутки. Пытался скачать его с помощью wget, Web Copy и WinHTTrack. Сохраняется полупустой index.html и одна папка. Как можно скачать этот сайт? Не вручную же )
  • Вопрос задан
  • 146 просмотров
Решения вопроса 1
@Akela_wolf
Extreme Programmer
Суть в том, что браузер использует JavaScript для формирования страницы. Если нужно скачать только данные - то найти запрос, который браузер шлет в бэкэнд и скачать данные им (там будет JSON или что-то подобное)

Если нужно скачать сайт прямо с оформлением - то проще всего написать небольшую программу, которая запустит реальный браузер (chrome точно так можно, насчет firefox не уверен) в автоматическом режиме и может имитировать в нем любые действия пользователя. См. chromedriver. Если ничего не путаю, то Selenium такое умеет.
Ответ написан
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы