Я в свое время использовал selenium, он умеет грузить страницу и автоматизировать действия на ней, с Яндексом могут возникнуть проблемы из за капчи.
Парсил страницы на Яндекс работе когда она была живая, собирал со страницы необходимые ссылки BeautifulSoup.
Далее обрабатывал ссылке как мне было необходимо. На сколько помню использовал еще fake_useragent
