Как скачать сайт из web.archive.org?

Question

[Danil Namaste]

Купил домен, страницы сайта есть только в веб-архиве, их очень много. Если ли способы скачать весь сайт целиком?

Comments

[Closhopo]

Вам нужен Wayback Machine Downloader, вот тут ссылка на хорошую инструкцию.

Answer 1

[konfuze]

Я скачивал используя гем wayback-machine-downloader — у него можно выбрать версию снепшота и другие параметры, в целом, больше и не нужно.

https://github.com/hartator/wayback-machine-downloader

Comments

[konfuze]

Судя по всему, вы уже установили gem, выполнив "gem install wayback_machine_downloader" в командной строке.

Дальше нужно выполнить "wayback_machine_downloader http://адрес-сайта.домен"

[Bujhm petrov]

konfuze,А что я не правильно делаю пишу такую команду wayback_machine_downloader -f20150915000000 -t20191201000000 *****.ru вроде все скачивается , но ссылки в файле index все ведут "Срок регистрации домена истек." хотя в архиве эти папки все есть,все открываются.

[konfuze]

Bujhm petrov, а на самом сайте web.archive.org ссылки работают корректно?
Ссылки ведут на web.archive.org/***.ru или на ***.ru?

[Bujhm petrov]

konfuze, в файле index все адреса на старый домен.Я так понимаю на другой домен неполучится?

[F-302]

Спасибо за совет, действительно рабочая вещь, очень полезно.
Стоит напомнить, что для нормальной работы нужна установка Ruby >= 1.9.2.

[Вадим Котов]

Все установил, но после попытки скачать сайт выдает вот такую простыню:


Кто нибудь подскажет в чем проблема?

[seosock]

Вадим Котов, он давно не обновлялся
Сейчас рабочий вариант это https://github.com/birbwatcher/wayback-machine-dow...

Answer 2

[archivarix]

https://ru.archivarix.com/ - система сама оптимизирует скаченный сайт, убирает битые ссылки, неработающие скрипты и прочий мусор.

Comments

[Vadim-DZZ]

опробовал - нормально скачивает

[Ольга]

Подтверждаю. Я технически далека от всего этого, но их поддержка оказалась на высоте. Мне не только помогли все загрузить, но еще и понятным языком объяснили как редактировать сайт. У них к каждому восстановлению бесплатно идёт Archivarix CMS, где легко можно редактировать сайт, подключить туда свои счётчики и добавлять новые страницы. Спасибо вам.

[Hemul GM]

Платный сервис(

[sexydroid]

Брать деньги за то, что делает бесплатный софт из коммента ниже — красиво))

[Budhlipo]

Ольга, у вас говорящий никнейм. Жаль вы не упомянули про дырявость их CMS и многолетнюю проблему с паролем к админке.
Посмотрел ваши другие ответы, которых нет, и кажется вы просто сотрудник архиварикса.

Answer 3

[Пират Карибского моря]

HTTrack
Если, ввести определенную ссылку то скачается то что Вам будет нужно.
Не знаю, возможно это будет не то, что Вам нужно.

Answer 4

[Александр Борминцев]

Можно проверить наличие в MyDrop.io
Там более полные версии сайтов, нежели в вебархиве

Answer 5

[Pavel Zamoroka]

можно скачать через wget.
blog.archive.org/2012/04/26/downloading-in-bulk-us...

Answer 6

[parol]

самый простой способ - бесплатный archiveorg.download но он не всегда справляется со сложной версткой, тогда приходится исправлять руками или заказывать восстановление за деньги

Comments

[AndrewShe]

Возможно ранее был бесплатным пока с него не начали редиректить на архиварикс который платный. Самый норм способ скачать скрипт с гитхаба для выкачки.

Answer 7

[dampiru]

Я подробно описал процесс скачивания в этой статье https://dampi.ru/kak-skachat-sayt-iz-vebarhiva

Comments

[MrakCw]

Слишком много рекламы на вашем сайте

[MilaNick]

Ваше подробное объяснение сделало все простым и понятным. Сайт сейчас качается и я Вам благодарна.

Answer 8

[Александр]

Возможно вам нужна программа teleport

Answer 9

[Danil Namaste]

Прошу прощения, не уточнил. Купил домен, а контент есть только на веб.архиве.

Answer 10

[Анатолий Кирсанов]

Судя по их FAQ, никак. Только парсинг.

Comments

[Danil Namaste]

Я php + mysql немного знаю, тяжело написать парсер?

[Анатолий Кирсанов]

Данил Загорский: "грызите" nokogiri habrahabr.ru/post/110112 .
Сложность зависит от конкретного сайта. Никогда web архив не парсил.
У Вас все равно выбора нет, какая разница ....

[Danil Namaste]

Анатолий Кирсанов: спасибо, буду пробовать. Заодно и научусь чему)

Answer 11

[Andriweb]

Кто не хочет заморачиваться со скриптами, пишите мне на скайп majordonua. Выкачаю сайты с вебархива. На большие объёмы скидка.

Answer 12

[Александр]

Тут есть статья, описано как скачать сайт с вебархива на ПК с windows 10..... все страницы в html....ну а дальше ручками....бесплатно зато :=)

Answer 13

[seosock]

раньше был скрипт на ruby но он больше не работает, вот рабочий вариант
https://github.com/birbwatcher/wayback-machine-dow...