Python+Selenium+PhantomJS. Как реализовать ожидание страницы?

Question

[TechNOIR]

Добрый день. Подскажите пожалуйста как на примере данного простого кода реализовать ожидание загрузки страницы? Например ждёт 20 секунд и если не загрузилась то пишет сообщение и идёт на выход. Заранее спасибо.

from selenium import webdriver
import time
browser=webdriver.PhantomJS()
browser.get('http://yandex.ru')
browser.quit()

Answer 1

[qlkvg]

ну первая же ссылка в гугле - stackoverflow.com/questions/17533024/how-to-set-se...

from selenium import webdriver
from selenium.common.exceptions import TimeoutException
browser = webdriver.PhantomJS()
browser.set_page_load_timeout(30)
try:
    browser.get('https://yandex.ru')
except TimeoutException:
    print("can't load page")
browser.quit()

Comments

[TechNOIR]

Спасибо! Работает! Еще один вопрос небольшой. в Try я еще вставил Click по ссылке. У меня идет перебор прокси из листа и для каждого выполняется попытка загрузить страницу и выполнить клик. Если все норм - страница загрузилась и кликнула то переходит к следующему по списку прокси, либо пишет что can't load page. А вот если ссылки не найдено на сайте то он идёт сразу на выход, а не переходит к следующему прокси. Как устранить? Подскажите пожалуйста

[qlkvg]

видимо потому что обрабатывается только исключение по таймауту, а исключение по ненайденному элементу нет. https://docs.python.org/2.7/tutorial/errors.html

[TechNOIR]

Так...это мне получается нужно 2 условия Try-Except?
Если вместо except TimeoutException: ставлю except NoSuchElementException: и соответственно на ненайденный элемент реагирует а на незагрузку страницы выкидывает. Все наоборот получается

Answer 2

[Никита Каменев]

тут стоит заметить что именно таймаута на полную загрузку страницы нет. В примере выше, от пользователя qlkvg , показан пример с ожидаем хоть какого-то количества байт от сайта.

Comments

[Bjornie]

Никита Каменев долго пытался реализовать именно ожидание подгрузки данных по AJAX внутри страницы (а там грузился целый отдельный html-шаблон), но ничего проще чем расстановка таймслип не сделал. вэюдрайвер был хром.

[qlkvg]

Содержимое страницы можно на явных ожиданиях реализовать, но они не всегда работают, как надо.

Answer 3

[Evgeniy _]

http://selenium-python.readthedocs.io/waits.html

Якоря расставить и все