Артур Нуруллин: затем, что в PHP есть возможность (и я об этом сказал) получать данные параллельно без всяких костылей штатными средствами, но автор этого не делает.
поверьте, я это пишу не в защиту пыха (если гляните коменты к моему ответу, то я предлагал такой же вариант).
Артур Нуруллин: сами своему совету последуйте.
большинство времени при парсинге в основном уходит на получение данных, а не на обработку.
а теперь вопрос, если переписать это на .net и получать данные в один поток (а именно так сейчас он делает, хотя в PHP есть возможность получать их в несколько потоков), ему это сильно поможет?
Alex Clampson: в двух словах не объяснить. скажу только что со всяких ютюбов, вимео и прочих видеокаст-/порно-каналов, у которых ссылки непрямые и временные, скачать непроблема.
