Как увеличить количество прогруженных фото в яндекс картинках для парсинга?

Question

[Сергей Матковский]

Проблема в том что в яндексе нужно скролить вниз что бы прогрузить новые фото, но как это сделать для парсера?
Если не прогружать новые картинки то их количество будет ограничено и сами картинки будут такие же.
Я так понимаю что прогружает java script но не могу его нигде в коде html найти, если это так назовите пожалуйста скрипт и как его активировать при помощи request или каким либо другим способом.

Answer 1

[ScriptKiddo]

как его активировать при помощи request или каким либо другим способом

Используйте selenium

from selenium import webdriver
from selenium.webdriver.common.keys import Keys

driver = webdriver.Firefox()
driver.get("http://www.python.org")
assert "Python" in driver.title
elem = driver.find_element_by_name("q")
elem.clear()
elem.send_keys("pycon")
elem.send_keys(Keys.RETURN)
assert "No results found." not in driver.page_source
driver.close()

https://selenium-python.readthedocs.io/getting-sta...

Answer 2

[Руслан Гильфанов]

https://qna.habr.com/answer?answer_id=1817743#answ...