Можно ли с помощью Grab (python) открыть ссылку в «новом окне» и вытащить html?

Question

[Mark Adams]

Имеется страница с ссылкой. Нужный html можно получить только при переходе с данной страницы на другую (в новой вкладке). Можно ли как то реализовать эту логику через Grab?

Answer 1

[Вячеслав]

Grab сделан на основе lxml, а в lxml вообще нет никакой логики работы с окнами и яваскриптом. Так что ответ нет, нельзя.

Comments

[Mark Adams]

Как страница понимает что я перешел с нужной страницы? Ка отловить это скрипт? Смотрю через Chrome, там onclick: null

[Mark Adams]

http://ru.stackoverflow.com/questions/375573/Парси...

[Вячеслав]

Илья Кметь: думаю, дело в самих страницах, а в передаваемых данных. Может в сессию что то пишется, надо смотреть конкретно на сайте. Отдельную страницу могли сделать для удобства.

[Mark Adams]

Вячеслав: т е это сложно отловить?

[Вячеслав]

Ctrl+Shift+i в браузере, вкладка Network. А там уже смотришь, откуда что куда уходит.

Answer 2

[Артём Иннокентьев]

Никакое новое окно открывать не надо, просто у вашего тэга a стоит атрибут target="_blank". Поэтому ваш браузер при клике на ссылку открывает новое окно. Пауку будет достаточно ссылки из атрибута href.

Думаю логика действий вашего паука должна быть примерно такой:

Получаем исходную страницу -> Находим тэг a -> Извлекаем линк из атрибута href -> Получаем страницу по полученной ссылке

А дальше уже можете разбирать целевую страницу.