Как работать с паузой загрузки данных (парсинг selenium)?

Question

[san_m_m]

Добрый день!

Нужно полностью раскрыть данную страницу, но сталкиваюсь с тем, что данные на сайте прогружаются с некоторой задержкой, поэтому не находит нужный класс. Что делать в такой ситуации?

from selenium import webdriver

driver = webdriver.Chrome('D:\chromedriver.exe')
driver.get('https://gosuslugi.primorsky.ru/registry/taxi.htm')

css = "load-more btn btn-primary"
driver.find_elements_by_css_selector(css).click()

Answer 1

[Wispik]

ссылка

Comments

[san_m_m]

Не подскажите вот почему код не работает?

from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
import time


driver = webdriver.Chrome('D:\chromedriver.exe')
driver.get('https://gosuslugi.primorsky.ru/registry/taxi.htm')
try:
    element = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located((By.ID, "table"))
    )
except:
    pass
    time.sleep(10)

        
        
css = "load-more.btn.btn-primary"
driver.find_element_by_class_name(css).click()

[Wispik]

miksan,
во-первых, убери time.sleep из except
во-вторых, там у таблицы класс table, а не id, так должно работать

EC.presence_of_element_located((By.CLASS_NAME, "table"))

[san_m_m]

Wispik, Спасибо!

[san_m_m]

Wispik, Выдает следующую ошибку:
Message: element click intercepted: Element ... is not clickable at point (509, 635). Other element would receive the click: ...
(Session info: chrome=87.0.4280.141)

[Wispik]

miksan, ну хоть немного сам погугли, это же элементарные вопросы для селениума.

[san_m_m]

Wispik, Хорошо! Спасибо!