Как парсить динамическую таблицу с помощью selenium?

Question

[flash256]

Задача спарсить динамическую таблицу с помошью seleniumbase (обертка для selenium)
Но есть проблема: когда листаю страницу старые элементы удаляются, а новые появляются.
Вот пример, сначала элемент есть по запросу XPath:
Затем я прокручиваю страницу вниз, элемент пропадает из html кода страницы и в поиске его не найти.
Как распарсить такую таблицу?

Comments

[Dmitry]

хранить прогресс - запоминать где остановился, после этого двигать таблицу.

[flash256]

Dmitry, то есть когда дохожу до конца (последний xpath элемент), мне надо прокручивать страницу дальше? Правильно понял?

[Михаил Р.]

flash256, да

[maksam07]

С большой вероятностью, данные в полном объеме хранятся где-то в другом месте. Или идут запросы во внутренний апи.