Подскажите аналог scrapy для PHP или просто какую-то многопоточную скачивалку

Question

[tunelix]

желательно с поддержкой прокси.

Answer 1

[S1ashka]

curl_multi
wget вроде умеет

Answer 2

[tunelix]

если под рукой есть wget — значит прав много, можно scrapy запустить.

Answer 3

[zenon]

Соглашусь с , CURL поддерживает параллельную загрузку в несколько потоков.

Comments

[tunelix]

похоже придется делать для curl обертку самому, хотя все еще надеюсь найти что-то готовое.

Answer 4

[Денис]

Насколько я знаю, ничего похожего на scrupy в php нет.
Могу посоветовать достаточно удобную обёртку над curl code.google.com/p/rolling-curl

Comments

[tunelix]

спасибо