Как создать условие на Python «Пока на сайте не появится что-то — оставаться на нем»?

Question

[kolomiec_artiom]

Доброй ночи, друзья!

Мне нужно создать программу, которая будет действовать по следующему плану:

1. Переходить на какой-то сайт
   
2. Находиться до тех пор, пока на нем не появится нужная запись
   

Как реализовать переход на сайт я знаю (webbrowser), как спарсить я знаю (lxml). Остается один вопрос: как написать условие "Оставаться на сайте до тех пор, пока"?
Благодарен за ответы!

Answer 1

[Dmitry Bay]

Вам нужен виртуальный браузер, например phantomjs. Не уверен какие сейчас лучше удобнее.
Написать одну функцию promise на ожидание текста, после этого выйти.

Comments

[kolomiec_artiom]

благодарен

Answer 2

[asd111]

selenium

Comments

[kolomiec_artiom]

спасибо

Answer 3

[Saboteur]

Разобраться, как работает http и понять, что нет такого, как "оставаться на сайте" в принципе.
Нужно периодически обращаться на сайт и получать свежую информацию.

Comments

[kolomiec_artiom]

Проще говоря, мне нужно увеличить трафик. Опустим уникальный IP.

Мне нужно, чтобы программа находилась на сайте до тех пор, пока не появится надпись "Спасибо за посещение". Она появляется спустя время. Допустим, секунд 30. Как это сделать? Если я напишу webbrowser.open('ссылканасайт'), то он его откроет и сразу пойдет дальше. Не станет ждать эти заветные 30 секунд. Из-за чего просмотр не засчитывается

[Вадим]

kolomiec_artiom, скорее всего через 30 сек js скрипт шлет запрос к серверу и фиксирует что вы находились 30 сек на сайте. Если это так, то нужно определить куда уходит запрос и повторить его.

[Saboteur]

kolomiec_artiom, Программа не может "находиться на сайте".
Еще раз - подучите http.

разберитесь как появляется эта надпись - скорее всего это просто javascript, который крутится в браузере и периодически переопрашивает сайт (ajax)
Если же вы лезете на сайт не браузером, то реализовать в вашей программе поддержку javascript вашими силами не выйдет вообще.