Есть ли аналог wget на php для выкачки сайтов?

Question

[T_y_l_e_r]

Нужен аналог wget.
На вики дан замечательный пример для выкачки сайта целиком.

wget -r -l 10 -k -o log-file.txt -p https://toster.ru/

Совсем недавно узнал про эту штуку и был очень удивлен как точно и четко он выкачивает все стили и картинки в отличии от телепорта и вебкопера.
Но к сожалению он не умеет выкачивать контент на сайтах где требуется авторизация.
Есть ли скрипт на php или других языках который так же четко как wget умеет выкачивать сайты?
Перед выкачкой нужно прикрутить авторизацию, чтобы качал от юзера.

Answer 1

[Dimonchik]

ну, если wget, то тебя ждет еще много открытий

Answer 2

[Roman K]

Авторизуйся, забери куки, загрузи куки wget'ом

Comments

[T_y_l_e_r]

каким образом вгету дать куки?

[T_y_l_e_r]

а лучше сессию

[T_y_l_e_r]

да и формат кукисов из браузера нужно выцепить

[Roman K]

T_y_l_e_r: --load-cookies file
формат вот такой: unix.stackexchange.com/questions/36531/format-of-c...

[T_y_l_e_r]

+ прокси ip убраузера другие чем у wget, сессия может слететь

[Roman K]

T_y_l_e_r: Сессию вяжут к айпи? Я что вернулся в 2оО7?

[T_y_l_e_r]

к сожалению на многих сайтах именно так + еще проверяют заголовок юзерагента

[Roman K]

T_y_l_e_r: А типа хэдеры ты подменить не можешь?))

Answer 3

[ommunist]

Если речь идет о scraper-е на php, то посмотрите Goutte

Answer 4

[Александр]

exec('wget ...');