Как скачать весь контент с сайта?

Question

[ElezthemDev]

В общем скачал этот сайт клик через приложение WinHTTrack Website Copier, но контента нету на сайте, как обойти эту защиту и скачать весь сайт целеком? Вот скрин что вышло

Если кто знает как скачать то буду рад помощи, через WebCopy тоже самое вышло

Answer 1

[Игорь]

Наверное, нет прав доступа на чтение для файлов и каталогов сайта (хостинг). Защита, так сказать, от копирования. И от доступа посторонних, любопытных глаз. Сейчас не времена простых HTML-страниц и сайтов по типу "народа" (раньше был такой бесплатный хостинг). Где просто зашел в каталог, да качнул что интересно.
Контент, судя по всему, выдается неким хитрым образом (через основное приложение сайта, через скрипты?). А не напрямую, как было когда-то. Да и хранится, он, вероятно, не в сверстанных html-файлах, а в базе данных.
Защиту от копирования контента, порой нынче, можно наблюдать и на самих страницах: толи функция выделения текста, толи функция копирования выделенного текста - может быть запрещена.

Answer 2

[Олег]

Нет там никакой "защиты" - фронт сайта просто написан на vue.
https://vuejs.org/

Локально вы замучаетесь его подымать в виде статики.
В основных js скриптах - дизайн и вся логика (клиент сайт рендеринг - отрисовка сайта на стороне клиента )
бакенд содержимое нужных страниц отдает как json

Comments

[Aetae]

Хз, искать лень, но точно должны быть инструменты для этого: не такие уж проблемы сграбить весь сетевой трафик, подменить адрес и сделать чтоб сборка работала на локальном серваке\электроне\ещё как. Запросы редко прям рандомные.

...upd
В принципе даже особо напрягаться не придётся - серьёзную часть работы на себя возьмёт механизм PWA встроенный в браузеры.

Конечно как обычный html-файл такой скачанный сайт уже не откроешь, но это уже давно не вариант.:)

Answer 3

[Виктор Кожухарь]

Сайт полностью сгенерирован Javascript уже в браузере после загрузки страницы. В самом исходном коде html никаких данных нет. Поэтому скачать обычным образом его не получится.

Хорошо, что прекрасные люди придумали для этой задачи расширения для браузера. Например, вот такое https://chromewebstore.google.com/detail/save-page...

Нажав на кнопку расширения, будет скачана вся страничка полностью вместе со всеми текстами, стилями и изображениями в формате base64

Comments

[ElezthemDev]

Хорошо, попробую

[ElezthemDev]

Работает, но нельзя редактировать и вообще почти не работает страника

[Виктор Кожухарь]

ElezthemDev, Как это нельзя редактировать? Открываете html файл и редактируете, что душе угодно.

[ElezthemDev]

Виктор Кожухарь, там симфолы не понятные и не всё работает

[Иван]

ElezthemDev, квакозябры вместо символов? Значит кодировка файла неправильная.

[ElezthemDev]

Иван, русскую поставить?

[ElezthemDev]

Иван,
Вот так выглядит и вообще не понятно что написано, как сделать чтобы был нормальный html код?

[Виктор Кожухарь]

ElezthemDev, Это нормальный html-код. Просто изображения встроены прямо в этот html файл в виде base64. Там есть и тексты и всё остальное

Answer 4

[idleHB]

Есть старая, но надежная программа TeleportPro называется. Создают полностью локальную сайта. Имеет кучу настроек, включая глубину загрузки и выборки что качать, можно ли переходить на другие сайты. Правит ссылки на локальные.

Comments

[ElezthemDev]

Ну даже не знаю, просто уже как другой пишу а так попробую :)