Почему Simple HTML DOM Parser перестает работать?

Question

[GiveaFuck]

Использую PHP Simple HTML DOM Parser. Спарсить нужно не одну страницу, но не так много. Но скрипт периодически отваливается с ошибкой failed to open stream: Connection timed

В чем может быть причина и как исправить?

Answer 1

[olamedia .]

Сайт не отдает/не успевает отдавать с такой скоростью.
Либо просто перегружен.
Выставите паузу.

Comments

[GiveaFuck]

Я попробую. Как понять , что "сайт не отдает с такой скоростью"? Для загрузки html кода разве какой-то таймер устанавливается?

[olamedia .]

GiveaFuck: Connection timed out - Превышено ожидание на установление соединения с сервером.

[GiveaFuck]

Выставть паузу как? В самом скрипте методом тормоза страницы или как-то именно для загрузки страницы? Я просто новичок, не знаю.

[olamedia .]

sleep/usleep

[GiveaFuck]

olamedia .: так а все же что подразумевается под то что сервер не успевает отдать?

[olamedia .]

GiveaFuck: вариантов много. обычно узкое место - база данных. если выполняете несколько запросов параллельно - может быть ограничение на количество соединений, к примеру.

[Muhammad]

GiveaFuck: лучше используйте это: https://github.com/imangazaliev/didom