Как создать многопоточный паралельный парсер на selenium?

Question

[AndreyA2020]

Хочу написать парсер для тг бота, чтобы парсить ozon и М-видео, используя selenium, т.к информация о товарах загружается динамически. У меня получилось сделать парсер, но работал он поочерёдно, тоесть сначала открывал озон, потом М-видео и выводил результат. А я бы хотел, чтобы страницы парсились паралельно, одновременно и mvideo и ozon и по мере получения отправлялись в тг бота. Я знаю про Pool, но проблема в том, что в странице используются разные html классы, и для извлечения инф. о товаре нужны разные функции. Подскажите, как это можно реализовать?

Comments

[Алан Гибизов]

См.п.3.1, 5.12 Регламента.

Answer 1

[Dimonchik]

запусти два отдельных рядом, будет одновременно

Comments

[mayton2019]

Да. Я-бы проголосовал за это как за решение. Но интересно есть ли ограничения на сами headless браузеры и не помешает ли нам злобный старикашка по фамилии Амдал.

[Dimonchik]

на впс может помешать конечо, но 2 уж точно должны работать )))